WO2010121954A1 - Automated teller machine comprising camera arrangement to detect manipulation attempts - Google Patents

Automated teller machine comprising camera arrangement to detect manipulation attempts Download PDF

Info

Publication number
WO2010121954A1
WO2010121954A1 PCT/EP2010/055011 EP2010055011W WO2010121954A1 WO 2010121954 A1 WO2010121954 A1 WO 2010121954A1 EP 2010055011 W EP2010055011 W EP 2010055011W WO 2010121954 A1 WO2010121954 A1 WO 2010121954A1
Authority
WO
WIPO (PCT)
Prior art keywords
atm
self
service terminal
cameras
camera
Prior art date
Application number
PCT/EP2010/055011
Other languages
German (de)
French (fr)
Inventor
Steffen Priesterjahn
Dinh-Khoi Le
Michael Nolte
Alexander Drichel
Original Assignee
Wincor Nixdorf International Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wincor Nixdorf International Gmbh filed Critical Wincor Nixdorf International Gmbh
Priority to EP10715523.6A priority Critical patent/EP2422324B1/en
Publication of WO2010121954A1 publication Critical patent/WO2010121954A1/en

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20—Automatic teller machines [ATMs]
    • G07F19/207—Surveillance aspects at ATMs
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20—Automatic teller machines [ATMs]

Definitions

  • the invention relates to a self-service terminal and a camera arrangement for detecting manipulation attempts according to the preamble of one of the independent claims.
  • the invention relates to a self-service terminal, which is designed as an ATM.
  • the spied out data is then transmitted to a remote receiver via a transmitter built into the keyboard superstructure, or is located in a keyboard overlay Data memory saved.
  • a transmitter built into the keyboard superstructure or is located in a keyboard overlay Data memory saved.
  • the object is achieved by a self-service terminal with the features of claim 1 or by a camera arrangement with the features of the independent claim.
  • a self-service terminal which has provided in a control panel of the self-service terminal elements that are provided for users of the self-service terminal, and having a camera arrangement, wherein for detecting tampering with the self-service terminal at least two of the cameras or are mounted in the self-service terminal in the vicinity of the control panel and each detect at least one of the elements.
  • the elements detected by the cameras are, for example, manipulation-suitable elements, such as, for example, the keyboard, the cash-out compartment or the card-input hopper, ie control elements in the narrower sense. It may also be arranged in manipulation-suitable areas of the control panel elements, such as a shelf or the like.
  • the at least two cameras are integrated in the self-service terminal and connected to a data processing unit which processes the image data generated by the cameras.
  • Elements are recorded, available for data processing.
  • individual of the cameras can be targeted, e.g. be aligned with a particular control or even integrated in a control.
  • the data processing unit combines and evaluates the image data generated by the plurality of cameras in order to detect manipulations on one or more of the cameras. Also, by combining and evaluating the image data, manipulations in the detection range of one or more of the cameras can be detected.
  • the data processing unit can combine and evaluate the image data in order to detect deviations that relate to the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness.
  • At least some of the cameras may be mounted in a housing section of the self-service terminal surrounding the control panel, in particular being installed in that housing section of the self-service terminal which delimits the control panel laterally or upwardly.
  • a single one of the cameras can also detect at least two of the elements provided in the control panel, in particular two control elements, such as e.g. a cashbox and a keyboard, capture.
  • another camera may be integrated in one of the elements provided in the control panel, in particular integrated in a card input hopper.
  • an additional camera for an area is provided on the self-service terminal at which a user, in particular his head, is located during the operation of the self-service terminal.
  • a portrait of the user can be included.
  • the data processing unit may be integrated in the self-service terminal.
  • the data processing unit preferably has a first stage receiving the image data for image processing, in particular for shadow removal, edge detection, vectorization and / or segmentation.
  • the data processing unit may have a second stage downstream of the first stage for feature extraction, in particular by means of blob analysis, edge position and / or color distribution.
  • the data processing unit can still one the second stage downstream third stage for classification.
  • the data processing unit can also have interfaces for video surveillance systems or units (so-called CCTV) and / or security systems.
  • CCTV video surveillance systems or units
  • the data processing unit if it detects a manipulation attempt on one of the elements by means of the processing of the image data and / or detects a manipulation on one of the multiple cameras, triggers an alarm, blocks the self-service terminal and / or triggers the additional camera. It can also be provided that the cameras and / or the data processing unit are or is deactivated during the operation and / or maintenance of the self-service terminal.
  • Fig. 1 shows a perspective view of the
  • Fig. 2 shows the detection range of that camera of Fig. 1 which detects the control panel from the side;
  • Fig. 3 outputs the detection range of that camera
  • Fig. 1 again, which detects the control panel from the top;
  • Fig. 4a shows the installation situation of the camera integrated in the card input hopper
  • Fig. 4a shows the detection range of this camera of Fig. 4a again.
  • FIG. 5 shows a block diagram of a data processing unit connected to a plurality of cameras and a video surveillance unit connected thereto.
  • Fig. 1 shows a perspective view of the basic structure of a self-service terminal in the form of an ATM ATM.
  • a cash dispenser 1 also referred to as a shutter
  • a keyboard 2 i. Controls to which manipulation attempts, e.g. in the form of superstructures, for the purpose of skimming.
  • the ATM ATM is equipped with a camera arrangement according to the invention for detecting such and similar manipulation attempts.
  • the camera arrangement comprises a plurality of cameras mounted at different locations, namely a lateral camera CAMS, a top view camera CAMD, a camera CAMK (shown in FIG. 4a) integrated in the card input hopper, and an additional portrait camera CAMO ,
  • At least two of the cameras CAMS and CAMD are in the vicinity of the control panel, ie within a boundary, frame or the like and are mounted there.
  • Each of these cameras here in Fig. 1, for example the camera CAMS or CAMD, detects in each case at least one of the elements arranged in the control panel of the ATM, eg the cash dispenser 1 (shutter) and / or the keyboard 2.
  • the lateral camera CAMS preferably detects exactly these two elements 1 and 2; the top view camera CAMD also detects further elements (see FIG. 3).
  • the camera CAMK integrated in the card input hopper 4 is also provided (see Fig. 4a), which detects only the area of the card discharge hopper. All these cameras are therefore located in the vicinity of the control panel and are equipped with single or multiple elements.
  • the additional camera CAMO is located in the upper housing part of the ATM ATM and is directed to the area in which the user is operating the ATM.
  • this camera captures CAMO the head or the face of the user and is therefore referred to here as a portrait camera.
  • FIG. 2 shows the detection range of the camera CAMS, which is located in a lateral housing part, which frames or surrounds the control panel of the ATM ATM.
  • the camera CAMS is equipped with a wide-angle lens in order to detect at least these two elements or partial areas of the control panel.
  • the ATM ATM is designed so that said elements 1 and 2 preferably have the most homogeneous surfaces with these delimiting edges. This simplifies object recognition. By attaching the camera CAMS in this most suitable position, the mentioned Subareas or elements 1 and 2 are very reliably measured optical. It can be provided that the camera is focused in particular on certain areas.
  • FIG. 1 Another perspective, namely that of the top view camera CAMD, is illustrated with reference to FIG.
  • the detection field of this camera CAMD is illustrated, which is installed in the upper area of the ATM ATM (see also Fig. 1) and which captures the control panel from above.
  • other elements may also be provided in the detection area of the camera, such as e.g. a shelf near the keyboard, a card entry hopper 4, i. the feeding part for the card reader, as well as e.g. a screen 5 or display.
  • These further mentioned elements 3, 4 and 5 represent potential targets for manipulation attempts.
  • FIG. 4a For the card input funnel 4 itself, the camera CAMK integrated therein is provided.
  • FIG. 4b illustrates the detection range of the camera CAMK, and clearly shows that it can be subdivided substantially into three subregions I, II and III.
  • At least the cameras CAMS mounted in the vicinity of the control panel; CAMD and CAMK are connected to a special data processing unit 10 (see FIG. 5) in order to significantly improve the detection of manipulations by combining image data.
  • This data processing unit described later makes it possible to optimally evaluate the image data generated by the camera, in order thus With high security a manipulation attempt, such as a superstructure of the keyboard 2 or a manipulation on one of the cameras, to detect immediately and possibly trigger alarms and deactivations.
  • the following manipulations can be reliably detected, among others:
  • FIG. 5 shows the block diagram of a data processing unit 10 according to the invention, to which the cameras CAMS, CAMD and CAMK are connected, as well as one Video surveillance or CCTV unit 20, which is connected to the data processing unit 10.
  • the data processing unit 10 has in particular the following stages or modules:
  • the stage 13 is connected to an interface 14, via which various alarm or monitoring devices can be activated or addressed.
  • alarm or monitoring devices include, inter alia, a Schmemblschungs- or manipulation detection (IFD).
  • the first stage 11, which serves for image processing, is also connected to a second interface 15 via which a connection to the CCTV unit 20 is established. With the help of this CCTV unit, for example, a remote monitoring or remote diagnosis can be performed.
  • the data processing unit 10 For processing the image data D generated by the cameras CAMS, CAMD and CAMK, the data processing unit 10 is initially responsible.
  • the image data D first reaches the first stage 11, which carries out a preprocessing of the incoming image data, in which case, in particular, measures such as shadow removal, edge detection, vectorization and / or segmentation are performed.
  • the downstream second stage 12 serves the feature extraction, which can be carried out for example by means of a so-called Blobanalysis, an edge positioning and / or a color distribution.
  • Blob analysis is used to detect contiguous regions in an image and to make measurements on the blobs.
  • a Blob (Binary Large Object) is an area of adjacent pixels the same logical state. All the pixels in a picture belonging to a blob are in the foreground. All other pixels are in the background. In a binary image, pixels in the background have values that correspond to zero, while every pixel other than zero is part of a binary object.
  • a classification is made which determines whether or not an enemy manipulation has occurred at the self-service terminal ATM on the basis of the extracted features.
  • the data processing unit 10 can be realized for example by means of a personal computer with the
  • ATM ATM is connected or integrated into it.
  • the additional camera CAMO can also be mounted on the ATM ATM (see FIG.
  • Camera CAMO may be triggered upon detection of a tamper attack to take a picture of the person at the ATM. For example, once a skimming attack is detected, the described system can perform the following actions:
  • the size and nature of the actions taken or countermeasures can be configured by the operator of the ATM via the system described here.
  • the cameras CAMS and CAMD detecting the control panel from the outside and the camera CAMK e.g. the card entry funnel from inside detected.
  • an additional portrait camera can be installed (see CAMO in Fig. 1).
  • the CAMS and CAMD cameras are used on the control panel and the CAMK camera in the card input.
  • the portrait camera CAMO is also used.
  • all cameras have a resolution of at least 2 megapixels.
  • the lenses used have a viewing angle of about 140 degrees and more.
  • the exposure time of the cameras used in a wide range for example, 0.25 msec to 8,000 msec (8 s) is freely adjustable. This allows adaptation to a wide variety of lighting conditions. Applicant's experiments have shown that a camera resolution of about 10 pixels per degree can be achieved. Based on a distance of one meter, an accuracy of 1.5 mm per pixel can be achieved. This in turn means that manipulation can be reliably detected from a reference deviation of as little as 2 to 3 mm. The closer the camera lens is to the detected element or object, the more accurate the measurement can be. Thus, in closer areas even an accuracy of less than 1 mm can be achieved.
  • the detection of the cash dispenser (shutter) 1 makes it possible to check manipulations in the form of so-called cash trappers, i. special superstructures.
  • the detection of the keypad makes it possible to determine there manipulation attempts by superstructures or changes to light protection measures and the like.
  • the detection of the support surface makes it possible in particular to detect complete overbuilding.
  • the detection of the card input funnel 4, in particular by a camera integrated therein, makes it possible to detect local manipulations.
  • Deviations at the rear outer edge of the support surface can already be detected from 4 mm become. Deviations at the lower edge of the shutter can already be detected from 8 mm.
  • the data processing unit 10 performs, in particular, a comparison of the recorded image data D with reference data.
  • a comparison of the recorded image data D with reference data In this case, in particular, an image of the outside area can be examined for its homogeneity and compared with the image of the outside area of the control panel camera.
  • the image data of the various cameras CAMS, CAMD and / or CAMK are compared with each other, e.g. determine if any of the cameras have been tampered with. If, for example, the CAMD camera has been covered, the result is a discrepancy with the images of the other cameras.
  • the image data or information can also be used as follows:
  • Distinction between artificial and natural obscuration If a camera is covered, its recorded image is in conflict with the images of the other cameras. If the natural light (daylight) or the artificial light (room lighting) fails, the effect is the same or at least similar on all cameras. Otherwise, the system detects a tampering attempt. Detection of deceptive attacks on the camera arrangement, eg through pre-glued photos: If a single camera shows a different image (brightness, movement, colors, especially with regard to the outside area), this indicates one
  • the connection of the system to the Internet via the interface 23 makes it possible to remotely control the camera or the various cameras.
  • the acquired image data can also be transmitted via the Internet connection to a video server.
  • the respective camera guasi acts as a virtual IP camera.
  • the CCTV unit 20 described above is used for such a video surveillance facility, wherein the interface 15 to the CCTV unit is designed for the following functions:
  • the system is designed so that no false alarms are generated by hands and / or objects in the picture during normal operation (eg withdrawing money, checking account balance, etc.). Therefore, the tamper detection is disabled during the period of normal machine use. Also, in time periods in which, for example, a cleaning or a short-term other use (storage of account statements, interactions before and after the start of a transaction) are not used for tamper detection. Essentially, therefore, only rigid and immovable manipulation attempts are preferably analyzed and recognized.
  • the system is designed to work in a wide variety of lighting conditions (day, night, rain, cloudy, etc.). Also, briefly changing light conditions, such as light reflections, shadows and the like, are compensated or ignored during image processing to avoid a false alarm. In addition, technically occurring events, such as the failure of a lighting and the like, are taken into account. These and other special cases are recognized and solved in particular by the third stage for classification.
  • the method for manipulation detection performed by the described system has in particular the following sequence (see also FIG.
  • an image acquisition (stage 11), wherein the camera parameters are adjusted to produce suitable recordings.
  • a series of images or corresponding image data D is recorded, which then serves as the basis or reference for the preprocessing.
  • a preprocessing of the image data D takes place
  • Level 11 which are processed so that they are as good as possible for further processing.
  • several images are combined to form a target image and optimized by means of image enhancement algorithms.
  • the following steps are carried out:
  • Shadow removal, removal of moving objects, removal of noise and / or summary of various exposed shots are annoying and/or recommended to be used as a background.
  • the cameras are u.a. set to different exposure times to remove reflections and to collect well-lit areas.
  • the images are collected over a predetermined period of time to obtain the best possible output images for manipulation detection.
  • a feature extraction is performed (step 12) in which image analysis processes are performed on the preprocessed images to validate them for particular features, such as image analysis. on edge positions or color distributions. For each feature, a number or a value can be specified, which indicates how well the corresponding feature was found again in the viewed image. The values are summarized in a so-called feature vector.
  • a classification is carried out (step 13), ie the feature vector is passed to a classification procedure to make a decision as to whether there is a manipulation or not.
  • a classification procedure to make a decision as to whether there is a manipulation or not.
  • those types of classifiers are used which can indicate confidence, ie a probability or certainty, with which the decision applies.
  • Classification mechanisms used can be, for example:
  • the system described herein is preferably modular in design to allow for different configurations.
  • the actual image processing and the CCTV connection are realized in different modules (see FIG. 4).
  • the system presented here is also suitable for documenting the detected manipulations or digitally archiving them.
  • the captured images are provided with corresponding meta information, such as. Timestamp, type of manipulation, etc., stored on a hard disk in the system or in a connected PC.
  • messages may be forwarded to a platform, e.g. Error messages, status messages (deactivation, mode change), statistics, suspected manipulation and / or alarm messages.
  • a corresponding message with the respective alarm level can be forwarded to the administration interface or the interface.
  • the following options are also implemented at this interface:
  • Query of camera data such as number of cameras, construction status, serial number, etc., camera master data or Set camera parameters and / or register for alarms (notifications).
  • the invention presented here is particularly suitable for carrying out hostile manipulations on a self-service terminal, such as e.g. at an ATM, reliable to recognize.
  • the control panel is continuously and automatically monitored by at least one camera.
  • the elements detected by the camera are optically measured in order to detect deviations from reference data. It has been shown that even deviations in the millimeter range can be reliably detected.
  • a combination of edge detection and segmentation is preferably used, so that contours of left objects can be clearly recognized and marked. In the case of a manipulation attempt countermeasures or actions can be triggered.
  • the invention significantly increases the reliability with which manipulations can be detected.
  • the invention has the following camera arrangement:
  • the cameras are connected to the described data processing unit.
  • Within the data processing unit are those of the cameras obtained image data or information among other things used as follows:
  • Recognition or distinction of artificial and natural obscuration If a camera is covered, its captured image contradicts the images from the cameras. If natural or artificial light fails, this effect is equally noticeable on all cameras. Detection of deception attacks on the camera system, e.g. through pre-clicked photos: If a camera displays a different picture (different brightness, movement, colors, etc.), this indicates an attempt to deceive. Increasing the robustness of the cover detection on the card input hopper: If the card slot is hidden, the integrated camera CAMK displays a different image of the outside area than the other cameras do.
  • a self-service terminal with a camera arrangement which has a plurality of cameras, which are mounted in the vicinity of the control panel of the self-service terminal and detect there provided elements, such as keyboard, cash dispenser, card slot to detect tampering attempts on the self-service terminal.
  • one of the cameras is integrated in the card insertion hopper.
  • the cameras are connected to a data processing unit which processes the image data generated by the cameras.
  • the image data is also combined and evaluated to allow manipulation of one or more of the cameras detect. In particular, for this purpose, deviations are evaluated which relate to the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness.
  • the present invention has been described using the example of an ATM, but is not limited thereto, but can be applied to any type of self-service terminals.
  • ATM self-service terminal designed as an ATM, with a control panel CP, ia. having:
  • Video surveillance or CCTV unit with:

Abstract

The invention proposes an automated teller machine comprising a camera arrangement having a plurality of cameras (CAMS, CAMD, CAMK), which are mounted in the proximity of the control panel of the automated teller machine and capture images of elements arranged there, such as the keyboard, money-dispensing compartment, and card entry slot, for example, in order to detect manipulation attempts on the automated teller machine. Preferably, one of the cameras (CAMK) is integrated in the card entry slot. The cameras (CAMS, CAMD, CAMK) are connected to a data processing unit (10) that processes the image data (D) produced by the cameras. The image data is also combined and analyzed in order to detect manipulation of one or more of the cameras. In particular, anomalies that relate to the image content, the image composition, and/or the image quality, particularly the image illumination and/or brightness, are analyzed.

Description

Selbstbedienungsterminal mit Kamera-Anordnung zum Erkennen von Manipulationsversuchen Self-service terminal with camera arrangement for detecting tampering attempts
Die Erfindung betrifft ein Selbstbedienungsterminal sowie eine Kamera-Anordnung zum Erkennen von Manipulationsversuchen nach dem Oberbegriff eines der nebengeordneten Ansprüche. Insbesondere betrifft die Erfindung ein Selbstbedienungs- terminal, das als Geldautomat ausgestaltet ist.The invention relates to a self-service terminal and a camera arrangement for detecting manipulation attempts according to the preamble of one of the independent claims. In particular, the invention relates to a self-service terminal, which is designed as an ATM.
Im Bereich von Selbstbedienungsautomaten, insbesondere Geldautomaten, werden häufig kriminelle Handlungen in Form von Manipulationen vorgenommen, die das Ziel verfolgen, sensitive Daten, insbesondere PINs (Personal Identification Numbers) und/oder Kartennummern, von Nutzern des Selbstbedienungsterminals auszuspähen. Insbesondere sind Manipulationsversuche bekannt, bei denen sogenannte Skimming- Vorrichtungen, wie beispielsweise Tastaturüberbauten und dergleichen, im Bedienbereich bzw. Bedienfeld widerrechtlich installiert werden. Solche Tastaturüberbauten verfügen häufig über eine eigene Stromversorgung, sowie einen Prozessor, einen Speicher und ein Betriebsprogramm, sodass ein ahnungsloser Nutzer bei Eingabe seiner PIN oder beim Einführen seiner Bankkarte ausgespäht wird. Die ausgespähten Daten werden dann über einen in dem Tastaturüberbau integrierten Sender an einen entfernten Empfänger übertragen oder werden in einem im Tastaturüberbau befindlichen Datenspeicher gespeichert. Viele der heutzutage anzutreffenden Skiiruning-Vorrichtungen können nur sehr schwer mit dem menschlichen Äuge von originalen Bedienelementen (Tastatur, Kartenleser usw. ) unterschieden werden.In the field of self-service machines, in particular ATMs, criminal acts are often carried out in the form of manipulations with the aim of spying on sensitive data, in particular PINs (Personal Identification Numbers) and / or card numbers, from users of the self-service terminal. In particular, manipulation attempts are known in which so-called skimming devices, such as keyboard superstructures and the like, are installed illegally in the operating area or control panel. Such keyboard superstructures often have their own power supply, as well as a processor, a memory and an operating program, so that an unsuspecting user is spied on entering his PIN or inserting his bank card. The spied out data is then transmitted to a remote receiver via a transmitter built into the keyboard superstructure, or is located in a keyboard overlay Data memory saved. Many of the ski-tuning devices encountered today are very difficult to distinguish with the human eye of original controls (keyboard, card reader, etc.).
Um derartige Manipulationsversuche zu vereiteln, werden häufig Überwachungssysteme eingesetzt, die mehrere Kameras aufweisen, welche den Bedienbereich des jeweiligen Selbstbedienungsterminals erfassen. Eine solche Lösung ist beispielsweise in der US 6,583,813 Bl beschrieben. Mittels der dortigen Kamera-Anordnung kann das Selbstbedienungsterminal aus verschiedenen Blickwinkeln überwacht werden. Dennoch ist es im Einzelfall recht schwierig, einen Manipulationsversuch sofort und sicher zu erkennen, um die Nutzer der Selbstbedienungsautomaten sowie den Betreiber vor Schaden zu bewahren. Insbesondere ist nicht ohne weiteres anhand solcher Kameraüberwachungen zu erkennen, ob auch an den Kameras selbst Manipulationen durchgeführt worden sind.In order to thwart such manipulation attempts, monitoring systems are often used which have a plurality of cameras which detect the operating area of the respective self-service terminal. Such a solution is described for example in US 6,583,813 Bl. By means of the local camera arrangement, the self-service terminal can be monitored from different angles. Nevertheless, in individual cases it is quite difficult to immediately and reliably detect a manipulation attempt in order to protect the users of the self-service machines and the operator from damage. In particular, it is not readily apparent from such camera monitors whether manipulations have also been carried out on the cameras themselves.
Demnach ist es Aufgabe der vorliegenden Erfindung, eine verbesserte Anordnung vorzuschlagen, die ein sicheres Erkennen von Manipulationsversuchen erlaubt.Accordingly, it is an object of the present invention to propose an improved arrangement that allows a reliable detection of manipulation attempts.
Gelöst wird die Aufgabe durch ein Selbstbedienungsterminal mit den Merkmalen des Anspruchs 1 bzw. durch eine Kamera- Anordnung mit den Merkmalen des nebengeordneten Anspruchs.The object is achieved by a self-service terminal with the features of claim 1 or by a camera arrangement with the features of the independent claim.
Demnach wird ein Selbstbedienungsterminal vorgeschlagen, das in einem Bedienfeld des Selbstbedienungsterminals vorgesehene Elemente aufweist, die für Nutzer des Selbstbedienungsterminals bereit gestellt sind, und das eine Kamera-Anordnung aufweist, wobei zum Erkennen von Manipulationsversuchen an dem Selbstbedienungsterminal zumindest zwei der Kameras an oder in dem Selbstbedienungsterminal im Nahbereich des Bedienfeldes montiert sind und jeweils mindestens eines der Elemente erfassen. Bei den von den Kameras erfassten Elementen handelt es sich beispielsweise um manipulations- geeignete Elemente, wie etwa Tastatur, Geldausgabefach oder Karteneingabetrichter, also um Bedienelemente im engeren Sinne. Es kann sich auch um in manipulationsgeeigneten Bereichen des Bedienfeldes angeordnete Elemente handeln, wie z.B. eine Ablagefläche oder dergleichen. Vorzugsweise sind die zumindest zwei Kameras in dem Selbstbedienungsterminal integriert und mit einer Datenverarbeitungseinheit verbunden, die die von den Kameras erzeugten Bilddaten verarbeitet.Accordingly, a self-service terminal is proposed which has provided in a control panel of the self-service terminal elements that are provided for users of the self-service terminal, and having a camera arrangement, wherein for detecting tampering with the self-service terminal at least two of the cameras or are mounted in the self-service terminal in the vicinity of the control panel and each detect at least one of the elements. The elements detected by the cameras are, for example, manipulation-suitable elements, such as, for example, the keyboard, the cash-out compartment or the card-input hopper, ie control elements in the narrower sense. It may also be arranged in manipulation-suitable areas of the control panel elements, such as a shelf or the like. Preferably, the at least two cameras are integrated in the self-service terminal and connected to a data processing unit which processes the image data generated by the cameras.
Somit wird mittels einer aus zwei oder mehr Kameras bestehenden Anordnung der Nahbereich des Bedienfeldes erfasst, so dass Bilddaten, die direkt an den einzelnenThus, by means of an arrangement consisting of two or more cameras, the close range of the control panel is detected, so that image data directly to the individual
Elementen erfasst werden, zur Datenverarbeitung zur Verfügung stehen. Dabei können einzelne der Kameras gezielt z.B. auf ein bestimmtes Bedienelement ausgerichtet sein oder sogar in einem Bedienelement integriert sein.Elements are recorded, available for data processing. In this case, individual of the cameras can be targeted, e.g. be aligned with a particular control or even integrated in a control.
Vorzugsweise ist vorgesehen, dass die Datenverarbeitungseinheit die von den mehreren Kameras erzeugten Bilddaten kombiniert und auswertet, um Manipulationen an einer oder mehreren der Kameras zu erkennen. Auch können durch Kombination und Auswertung der Bilddaten Manipulationen im Erfassungsbereich einer oder mehrerer der Kameras erkannt werden. Insbesondere kann die Datenverarbeitungseinheit die Bilddaten kombinieren und auswerten, um Abweichungen zu erkennen, die den Bildinhalt, den Bildaufbau und/oder die Bildqualität, insbesondere die Bildausleuchtung und/oder Helligkeit, betreffen. Diese und weitere besonders vorteilhafte Ausgestaltungen ergeben sich auch aus den Unteransprüchen.It is preferably provided that the data processing unit combines and evaluates the image data generated by the plurality of cameras in order to detect manipulations on one or more of the cameras. Also, by combining and evaluating the image data, manipulations in the detection range of one or more of the cameras can be detected. In particular, the data processing unit can combine and evaluate the image data in order to detect deviations that relate to the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness. These and other particularly advantageous embodiments will become apparent from the dependent claims.
Demnach können zumindest einzelne der Kameras in einem das Bedienfeld umgebenden Gehäuseabschnitt des Selbstbedienungsterminals montiert sein, insbesondere in demjenigen Gehäuseabschnitt des Selbstbedienungsterminals installiert sein, der das Bedienfeld seitlich oder nach Oben begrenzt. Dabei kann auch eine einzelne der Kameras zumindest zwei der im Bedienfeld vorgesehenen Elemente erfassen, insbesondere zwei Bedienelemente, wie z.B. ein Geldausgabefach und eine Tastatur, erfassen. Eine andere Kamera wiederum kann in einem der im Bedienfeld vorgesehenen Elemente integriert sein, insbesondere in einem Karteneingabetrichter integriert sein.Accordingly, at least some of the cameras may be mounted in a housing section of the self-service terminal surrounding the control panel, in particular being installed in that housing section of the self-service terminal which delimits the control panel laterally or upwardly. In this case, a single one of the cameras can also detect at least two of the elements provided in the control panel, in particular two control elements, such as e.g. a cashbox and a keyboard, capture. In turn, another camera may be integrated in one of the elements provided in the control panel, in particular integrated in a card input hopper.
Auch kann vorgesehen sein, dass an dem Selbstbedienungsterminal eine zusätzliche Kamera für einen Bereich vorgesehen ist, an dem ein Benutzer, insbesondere sein Kopf, sich während der Bedienung des Selbstbedienungsterminals befindet. Somit kann im Bedarfsfall auch ein Portrait des Nutzers aufgenommen werden.It can also be provided that an additional camera for an area is provided on the self-service terminal at which a user, in particular his head, is located during the operation of the self-service terminal. Thus, if necessary, a portrait of the user can be included.
Die Datenverarbeitungseinheit kann in das Selbstbedienungsterminal integriert sein. Bevorzugt weist die Daten- Verarbeitungseinheit eine die Bilddaten empfangende erste Stufe zur Bildverarbeitung, insbesondere zur Schattenentfernung, Kantendetektion, Vektorisierung und/oder Segmentierung, auf. Außerdem kann die Datenverarbeitungseinheit noch eine der ersten Stufe nachgeschaltete zweite Stufe zur Merkmalsextraktion, insbesondere mittels Blobanalyse, Kantenposition und/oder Farbverteilung, aufweisen. Zudem kann die Datenverarbeitungseinheit noch eine der zweiten Stufe nachgeschaltete dritte Stufe zur Klassifikation aufweisen.The data processing unit may be integrated in the self-service terminal. The data processing unit preferably has a first stage receiving the image data for image processing, in particular for shadow removal, edge detection, vectorization and / or segmentation. In addition, the data processing unit may have a second stage downstream of the first stage for feature extraction, in particular by means of blob analysis, edge position and / or color distribution. In addition, the data processing unit can still one the second stage downstream third stage for classification.
Auch kann die Datenverarbeitungseinheit Schnittstellen für Videoüberwachungssysteme bzw. -einheiten (sog. CCTV) und/oder für Sicherheitssysteme aufweisen.The data processing unit can also have interfaces for video surveillance systems or units (so-called CCTV) and / or security systems.
Bevorzugt ist vorgesehen, dass die Datenverarbeitungseinheit, wenn sie mittels der Verarbeitung der Bilddaten einen Manipulationsversuch an einem der Elemente erkennt und/oder eine Manipulation an einer der mehreren Kameras erkennt, einen Alarm auslöst, das Selbstbedienungsterminal sperrt und/oder die zusätzliche Kamera auslöst. Auch kann vorgesehen sein, dass die Kameras und/oder die Datenverarbeitungseinheit während der Bedienung und/oder Wartung des Selbstbedienungsterminals deaktiviert sind bzw. ist.It is preferably provided that the data processing unit, if it detects a manipulation attempt on one of the elements by means of the processing of the image data and / or detects a manipulation on one of the multiple cameras, triggers an alarm, blocks the self-service terminal and / or triggers the additional camera. It can also be provided that the cameras and / or the data processing unit are or is deactivated during the operation and / or maintenance of the self-service terminal.
Die Erfindung und die sich daraus ergebenen Vorteile werden nachfolgend anhand von Ausführungsbeispielen und unter Bezugnahme auf die beiliegenden schematischen Zeichnungen beschrieben, die folgendes darstellen:The invention and the advantages arising therefrom are described below by means of exemplary embodiments and with reference to the attached schematic drawings, which show the following:
Fig. 1 zeigt eine perspektivische Ansicht auf dasFig. 1 shows a perspective view of the
Bedienfeld eines Selbstbedienungsterminals mit einer Kamera-Anordnung;Control panel of a self-service terminal with a camera arrangement;
Fig. 2 gibt den Erfassungsbereich derjenigen Kamera aus Fig. 1 wieder, die das Bedienfeld von der Seite erfasst ;Fig. 2 shows the detection range of that camera of Fig. 1 which detects the control panel from the side;
Fig. 3 gibt den Erfassungsbereich derjenigen Kamera ausFig. 3 outputs the detection range of that camera
Fig. 1 wieder, die das Bedienfeld von Oben erfasst; undFig. 1 again, which detects the control panel from the top; and
Fig. 4a zeigt die Einbaussituation derjenigen Kamera, die in den Karteneingabetrichter integriert ist;Fig. 4a shows the installation situation of the camera integrated in the card input hopper;
Fig. 4a gibt den Erfassungsbereich dieser Kamera aus Fig. 4a wieder; undFig. 4a shows the detection range of this camera of Fig. 4a again; and
Fig. 5 zeigt ein Blockschaltbild für eine mit mehreren der Kameras verbundener Datenverarbeitungseinheit und damit verbundener Videoüberwachungs-Einheit .5 shows a block diagram of a data processing unit connected to a plurality of cameras and a video surveillance unit connected thereto.
Die Fig. 1 zeigt in eine perspektivische Ansicht den prinzipiellen Aufbau eines Selbstbedienungsterminals in Gestalt eines Geldautomaten ATM. Zu dem Bedienfeld Geldautomaten ATM gehören insbesondere ein Geldausgabefach 1, auch Shutter genannt, sowie eine Tastatur 2, d.h. Bedienelemente, an denen bevorzugt Manipulationsversuche, z.B. in Form von Überbauten, zwecks Skimming auftreten können. Der Geldautomaten ATM ist mit einer erfindungsgemäßen Kamera-Anordnung zum Erkennen solcher und ähnlicher Manipulationsversuchen ausgestattet .Fig. 1 shows a perspective view of the basic structure of a self-service terminal in the form of an ATM ATM. In particular, a cash dispenser 1, also referred to as a shutter, and a keyboard 2, i. Controls to which manipulation attempts, e.g. in the form of superstructures, for the purpose of skimming. The ATM ATM is equipped with a camera arrangement according to the invention for detecting such and similar manipulation attempts.
Die Kamera-Anordnung umfasst mehrere und an verschiedenen Stellen montierte Kameras, nämlich eine seitliche Kamera CAMS, eine Draufsicht-Kamera CAMD, eine (in Fig. 4a dargestellte) Kamera CAMK, die in den Karteneingabetrichter integriert ist, und eine zusätzliche Portrait-Kamera CAMO.The camera arrangement comprises a plurality of cameras mounted at different locations, namely a lateral camera CAMS, a top view camera CAMD, a camera CAMK (shown in FIG. 4a) integrated in the card input hopper, and an additional portrait camera CAMO ,
Zumindest zwei der Kameras CAMS und CAMD (und ebenfalls CAMK) befinden sich im Nahbereich des Bedienfeldes, d.h. innerhalb einer Abgrenzung, Umrahmung oder dergleichen und sind dort montiert. Jede dieser Kameras, hier in Fig. 1 beispielsweise die Kamera CAMS oder CAMD, erfasst jeweils zumindest eines der im Bedienfeld des Geldautomaten angeordneten Elemente, also z.B. das Geldausgabefach 1 (Shutter) und/oder die Tastatur 2. Die seitliche Kamera CAMS erfasst vorzugsweise genau diese beiden Elemente 1 und 2; die Draufsicht-Kamera CAMD erfasst darüber hinaus noch weitere Elemente (siehe Fig. 3) . Außerdem ist noch die in dem Karteneingabetrichter 4 integrierte Kamera CAMK vorgesehen (s. Fig. 4a), welche ausschließlich den Bereich des Kartenausgabetrichters erfasst. Alle diese Kameras befinden sich somit im Nahbereich des Bedienfeldes und sind auf einzelne oder mehrere Elemente ausgrichtet .At least two of the cameras CAMS and CAMD (and also CAMK) are in the vicinity of the control panel, ie within a boundary, frame or the like and are mounted there. Each of these cameras, here in Fig. 1, for example the camera CAMS or CAMD, detects in each case at least one of the elements arranged in the control panel of the ATM, eg the cash dispenser 1 (shutter) and / or the keyboard 2. The lateral camera CAMS preferably detects exactly these two elements 1 and 2; the top view camera CAMD also detects further elements (see FIG. 3). In addition, the camera CAMK integrated in the card input hopper 4 is also provided (see Fig. 4a), which detects only the area of the card discharge hopper. All these cameras are therefore located in the vicinity of the control panel and are equipped with single or multiple elements.
Die zusätzliche Kamera CAMO hingegen befindet sich im oberen Gehäuseteil des Geldautomaten ATM und ist auf den Bereich gerichtet, in dem sich der Nutzer beim Bedienen des Geldautomaten befindet. Insbesondere erfasst diese Kamera CAMO den Kopf bzw. das Gesicht des Nutzers und wird deshalb hier auch als Portraitkamera bezeichnet.The additional camera CAMO, however, is located in the upper housing part of the ATM ATM and is directed to the area in which the user is operating the ATM. In particular, this camera captures CAMO the head or the face of the user and is therefore referred to here as a portrait camera.
Die Figur 2 zeigt den Erfassungsbereich der Kamera CAMS, welche sich in einem seitlichen Gehäuseteil befindet, der das Bedienfeld des Geldautomaten ATM umrahmt bzw. einfasst. Im Blickwinkel dieser seitlichen Kamera CAMS befinden sich insbesondere das Geldausgabefach 1 und die Tastatur 2. Insbesondere die Kamera CAMS ist mit einem Weitwinkelobjektiv ausgestattet, um zumindest diese beiden Elemente bzw. Teilbereiche des Bedienfeldes zu erfassen. Der Geldautomat ATM ist dabei so beschaffen, dass die genannten Elemente 1 und 2 vorzugsweise möglichst homogene Flächen mit diese abgrenzenden Kanten aufweisen. Dadurch wird eine Objekterkennung vereinfacht. Durch Anbringung der Kamera CAMS an dieser besonders geeigneten Position können die genannten Teilbereiche bzw. Elemente 1 und 2 sehr zuverlässig optische vermessen werden. Es kann vorgesehen werden, dass die Kamera insbesondere auf bestimmte Bereiche scharf eingestellt ist.FIG. 2 shows the detection range of the camera CAMS, which is located in a lateral housing part, which frames or surrounds the control panel of the ATM ATM. In particular, the camera CAMS is equipped with a wide-angle lens in order to detect at least these two elements or partial areas of the control panel. The ATM ATM is designed so that said elements 1 and 2 preferably have the most homogeneous surfaces with these delimiting edges. This simplifies object recognition. By attaching the camera CAMS in this most suitable position, the mentioned Subareas or elements 1 and 2 are very reliably measured optical. It can be provided that the camera is focused in particular on certain areas.
Ein anderer Blickwinkel, nämlich der der Draufsicht-Kamera CAMD, wird anhand der Figur 3 verdeutlicht. Hier wird das Erfassungsfeld dieser Kamera CAMD veranschaulicht, die im oberen Bereich des Geldautomatens ATM installiert ist (s. auch Fig. 1) und die das Bedienfeld von oben erfasst. Neben dem Geldausgabefach 1 und der Tastatur 2 können in dem Erfassungsbereich der Kamera auch noch weitere Elemente vorgesehen sein, wie z.B. eine Ablagefläche in Nähe der Tastatur, ein Karteneingabetrichter 4, d.h. das Zuführungsteil für den Kartenleser, sowie z.B. ein Bildschirm 5 bzw. Display. Auch diese weiteren genannten Elemente 3, 4 und 5 stellen potentielle Ziele für Manipulationsversuche dar.Another perspective, namely that of the top view camera CAMD, is illustrated with reference to FIG. Here, the detection field of this camera CAMD is illustrated, which is installed in the upper area of the ATM ATM (see also Fig. 1) and which captures the control panel from above. In addition to the cash dispenser 1 and the keyboard 2, other elements may also be provided in the detection area of the camera, such as e.g. a shelf near the keyboard, a card entry hopper 4, i. the feeding part for the card reader, as well as e.g. a screen 5 or display. These further mentioned elements 3, 4 and 5 represent potential targets for manipulation attempts.
Für den Karteneingabetrichter 4 selbst ist die darin integrierte Kamera CAMK vorgesehen. Die Einbausituation ist in der Fig. 4a dargestellt. Um für diese Kamera CAMK eine gute Bildausleuchtung zu erreichen, kann die ohnehin eingesetzte Beleuchtung des Kartenschlitzes genutzt werden. Die Fig. 4b veranschaulicht den Erfassungsbereich der Kamera CAMK, und zeigt deutlich, dass dieser sich im wesentlichen in drei Teilbereiche I, II und III unterteilen lässt.For the card input funnel 4 itself, the camera CAMK integrated therein is provided. The installation situation is shown in FIG. 4a. In order to achieve good image illumination for this camera CAMK, the already used illumination of the card slot can be used. FIG. 4b illustrates the detection range of the camera CAMK, and clearly shows that it can be subdivided substantially into three subregions I, II and III.
Zumindest die im Nahbereich des Bedienfeldes montierten Kameras CAMS; CAMD und CAMK sind mit einer speziellen Datenverarbeitungseinheit 10 verbunden (siehe Figur 5), um durch Kombination von Bilddaten das Erkennen von Manipulationen deutlich zu verbessern. Diese noch später beschriebene Datenverarbeitungseinheit ermöglicht es, die von der Kamera erzeugten Bilddaten optimal auszuwerten, um somit mit hoher Sicherheit einen Manipulationsversuch, wie z.B. einen Überbau der Tastatur 2 oder eine Manipulation an einer der Kameras, sofort zu erkennen und gegebenenfalls Alarme und Deaktivierungen auszulösen. Mittels der noch später eingehender beschriebenen Datenverarbeitungseinheit sind unter anderem folgende Manipulationen sicher zu erkennen:At least the cameras CAMS mounted in the vicinity of the control panel; CAMD and CAMK are connected to a special data processing unit 10 (see FIG. 5) in order to significantly improve the detection of manipulations by combining image data. This data processing unit described later makes it possible to optimally evaluate the image data generated by the camera, in order thus With high security a manipulation attempt, such as a superstructure of the keyboard 2 or a manipulation on one of the cameras, to detect immediately and possibly trigger alarms and deactivations. By means of the data processing unit described in more detail later, the following manipulations can be reliably detected, among others:
- Anbringen eines Tastaturüberbaus- Attaching a keyboard superstructure
- Anbringen eines Komplettüberbaus an der unteren Auflagefläche- Attaching a complete superstructure to the lower support surface
- Anbringen eines Überbaus an dem Geldausgabefach (Shutter) und/oder das Anbringen von Gegenständen zur Aufnahme von Sicherheitsinformationen, insbesondere PIN-Nr., wie z.B. Minikameras, Kamerahandys und ähnliche Spähkameras.Attaching a superstructure to the cash box (shutter) and / or attaching items for receiving security information, in particular PIN no. Miniature cameras, camera phones and similar scouting cameras.
Für das Erkennen von Überbauten wird innerhalb der Datenverarbeitungseinheit 10 mit Hilfe der Kameras CAMS und CAMD eine optische Vermessung der erfassten Elemente, wie z.B. der Tastatur 2, durchgeführt, um somit Abweichungen im Manipulationsfall klar erkennen zu können. Versuche der Anmelderin haben gezeigt, dass bereits Referenzabweichungen im Millimeterbereich klar erkannt werden können. Für eine Erkennung von Fremdobjekten (Spähkamera) kann beispielsweise eine Kombination aus Kantendetektion und Segmentierung verwendet werden, um somit die Konturen von fremden Gegenständen im Bedienfeld (z.B. Minikameras) klar erkennen zu können. Die dazu erforderliche Bilddatenverarbeitung erfolgt überwiegend in der nachfolgend beschriebenen Datenverarbeitungseinheit .For the detection of superstructures within the data processing unit 10 with the aid of the cameras CAMS and CAMD an optical measurement of the detected elements, such as e.g. the keyboard 2, carried out so as to be able to clearly recognize deviations in the case of manipulation. Tests by the applicant have shown that even reference deviations in the millimeter range can be clearly recognized. For example, a combination of edge detection and segmentation can be used for recognition of foreign objects (scouting camera) in order to be able to clearly recognize the contours of foreign objects in the control panel (for example miniature cameras). The required image data processing takes place predominantly in the data processing unit described below.
Die Figur 5 zeigt das Blockschaltbild einer erfindungsgemäßen Datenverarbeitungseinheit 10, an welche die Kameras CAMS, CAMD und CAMK angeschlossen sind, sowie einer Videoüberwachungs- bzw. CCTV-Einheit 20, die mit der Datenverarbeitungseinheit 10 verbunden ist. Die Datenverarbeitungseinheit 10 weist insbesondere folgende Stufen bzw. Module auf:FIG. 5 shows the block diagram of a data processing unit 10 according to the invention, to which the cameras CAMS, CAMD and CAMK are connected, as well as one Video surveillance or CCTV unit 20, which is connected to the data processing unit 10. The data processing unit 10 has in particular the following stages or modules:
Eine erste Stufe 11 zur Bildverarbeitung, eine zweite Stufe 12 zur Merkmalsextraktion und eine dritte Stufe 13 zur Klassifikation der verarbeiteten Daten. Die Stufe 13 wiederum ist mit einer Schnittstelle 14 verbunden, über die verschiedene Alarm- oder Überwachungsvorrichtungen aktiviert bzw. angesprochen werden können. Diese, im weiteren auch AISS genannten, Vorrichtungen umfassen unter anderem eine Bildfälschungs- bzw. Manipulationserkennung (IFD) . Die erste Stufe 11 wiederum, welche zur Bildverarbeitung dient, ist auch mit einer zweiten Schnittstelle 15 verbunden, über die eine Verbindung zu der CCTV-Einheit 20 hergestellt wird. Mit Hilfe dieser CCTV-Einheit kann beispielsweise eine Fernüberwachung bzw. Ferndiagnose ausgeführt werden.A first stage 11 for image processing, a second stage 12 for feature extraction and a third stage 13 for the classification of the processed data. In turn, the stage 13 is connected to an interface 14, via which various alarm or monitoring devices can be activated or addressed. These, also referred to below as AISS, devices include, inter alia, a Bildfälschungs- or manipulation detection (IFD). The first stage 11, which serves for image processing, is also connected to a second interface 15 via which a connection to the CCTV unit 20 is established. With the help of this CCTV unit, for example, a remote monitoring or remote diagnosis can be performed.
Für die Verarbeitung der von den Kameras CAMS, CAMD und CAMK erzeugten Bilddaten D ist zunächst die Datenverarbeitungseinheit 10 zuständig. Die Bilddaten D gelangen zunächst an die erste Stufe 11, die eine Vorverarbeitung der ankommenden Bilddaten durchführt, wobei hier insbesondere Maßnahmen wie Schattenentfernung, Kantendetektion, Vektorisierung und/oder Segmentierung durchgeführt werden. Die nachgeschaltete zweite Stufe 12 dient der Merkmalsextraktion, die beispielsweise mittels einer sogenannten Blobanalyse, einer Kantenpositionierung und/oder einer Farbverteilung durchgeführt werden kann. Beispielsweise dient die Blob-Analyse zur Erkennung von zusammenhängenden Regionen in einem Bild und zur Ausführung von Messungen an den Blobs. Ein Blob (Binary Large Object) ist ein Bereich angrenzender Bildpunkte mit demselben logischen Zustand. Alle Bildpunkte in einem Bild, die zu einem Blob gehören, sind im Vordergrund. Alle übrigen Bildpunkte sind im Hintergrund. In einem binären Bild haben Bildpunkte im Hintergrund Werte, die Null entsprechen, während jeder Bildpunkt ungleich Null Teil eines binären Objekts ist.For processing the image data D generated by the cameras CAMS, CAMD and CAMK, the data processing unit 10 is initially responsible. The image data D first reaches the first stage 11, which carries out a preprocessing of the incoming image data, in which case, in particular, measures such as shadow removal, edge detection, vectorization and / or segmentation are performed. The downstream second stage 12 serves the feature extraction, which can be carried out for example by means of a so-called Blobanalyse, an edge positioning and / or a color distribution. For example, blob analysis is used to detect contiguous regions in an image and to make measurements on the blobs. A Blob (Binary Large Object) is an area of adjacent pixels the same logical state. All the pixels in a picture belonging to a blob are in the foreground. All other pixels are in the background. In a binary image, pixels in the background have values that correspond to zero, while every pixel other than zero is part of a binary object.
Anschließend erfolgt in der Stufe 13 eine Klassifikation, welche auf der Grundlage der extrahierten Merkmale bestimmt, ob eine feindliche Manipulation an dem Selbstbedienungsterminal bzw. Geldautomaten ATM aufgetreten ist oder nicht.Subsequently, in the step 13, a classification is made which determines whether or not an enemy manipulation has occurred at the self-service terminal ATM on the basis of the extracted features.
Die Datenverarbeitungseinheit 10 kann beispielsweise mittels eines Personalcomputers realisiert werden, der mit demThe data processing unit 10 can be realized for example by means of a personal computer with the
Geldautomaten ATM verbunden ist oder der darin integriert ist. Neben den Kameras CAMS, CAMD und CAMK, welche die genannten Teilbereiche des Bedienfeldes CP erfassen, kann auch die zusätzliche Kamera CAMO am Geldautomaten ATM montiert sein (s. Fig. 1), welche auf den Benutzer bzw.ATM ATM is connected or integrated into it. In addition to the cameras CAMS, CAMD and CAMK, which detect the mentioned subregions of the control panel CP, the additional camera CAMO can also be mounted on the ATM ATM (see FIG.
Kunden gerichtet ist und insbesondere sein Gesicht erfasst.Customer is addressed and in particular his face captured.
Diese zusätzliche, auch als Portraitkamera bezeichnete,This additional, also known as portrait camera,
Kamera CAMO kann beim Erkennen eines Manipulationsangriffes ausgelöst werden, um ein Bild von der sich am Geldautomaten befindenden Person zu machen. Sobald ein Skimming-Angriff erkannt wird, kann das beschriebene System beispielsweise folgende Aktionen durchführen:Camera CAMO may be triggered upon detection of a tamper attack to take a picture of the person at the ATM. For example, once a skimming attack is detected, the described system can perform the following actions:
Abspeichern eines Fotos des Angreifers, wobei sowohl einzelne der Kameras CAMS, CAMD und/oder CAMK wie auch die zusätzliche Portraitkamera CAMO aktiviert werden können Alarmieren der laufenden Geldautomatenapplikation und/oder eines zentralen Managementservers und/oder einer Person, z.B. über E-MailStoring a photo of the attacker, whereby both individual CAMS, CAMD and / or CAMK cameras as well as the additional portrait camera CAMO can be activated Alert the current ATM application and / or a central management server and / or a person, eg via e-mail
Einleitung von Gegenmaßnahmen, die z.B. das Sperren bzw. Herunterfahren des GeldautomatenInitiation of countermeasures, e.g. locking or shutting down the ATM
Übermittlung von Daten, insbesondere von Bildern, der erkannten Manipulation, beispielsweise über das Internet über eine ZentraleTransmission of data, in particular images, the detected manipulation, for example via the Internet via a central office
Den Umfang und die Art der getroffenen Aktionen bzw. Gegenmaßnahmen kann der Betreiber des Geldautomaten über das hier beschriebene System konfigurieren.The size and nature of the actions taken or countermeasures can be configured by the operator of the ATM via the system described here.
Wie oben beschrieben, können direkt am Bedienfeld mehrere installierte Kameras vorgesehen sein, wobei die Kameras CAMS und CAMD das Bedienfeld von Außen erfassen und die Kamera CAMK z.B. den Karteneingabetrichter von Innen erfasst. Außerdem kann eine zusätzliche Portrait-Kamera installiert sein (s. CAMO in Fig. 1) . Für die eigentliche Manipulations- erkennung werden die Kameras CAMS und CAMD am Bedienfeld und die Kamera CAMK in der Karteneingabe benutzt. Zum Zwecke der Dokumentation eines Manipulationsversuches wird auch die Portraitkamera CAMO benutzt.As described above, several cameras installed can be provided directly on the control panel, the cameras CAMS and CAMD detecting the control panel from the outside and the camera CAMK e.g. the card entry funnel from inside detected. In addition, an additional portrait camera can be installed (see CAMO in Fig. 1). For the actual detection of tampering, the CAMS and CAMD cameras are used on the control panel and the CAMK camera in the card input. For the purpose of documenting a manipulation attempt, the portrait camera CAMO is also used.
Vorzugsweise haben alle Kameras eine Auflösung von mindestens 2 Megapixeln. Die benutzten Objektive weisen einen Blickwinkel von etwa 140 Grad und mehr auf. Außerdem ist die Belichtungszeit der eingesetzten Kameras in einem weiten Bereich von beispielsweise 0,25 msec bis zu 8.000 msec (8 s) frei einstellbar. Dadurch wird die Anpassung an die unterschiedlichsten Beleuchtungsbedingungen ermöglicht. Versuche der Anmelderin haben ergeben, dass eine Kameraauflösung von etwa 10 Pixeln pro Grad erreichbar ist. Bezogen auf einen Abstand von einem Meter kann somit eine Genauigkeit von 1,5 mm pro Pixel erreicht werden. Das wiederum bedeutet, dass eine Manipulation ab einer Referenzabweichung von bereits 2 bis 3 mm sicher erkannt werden kann. Je näher das Objektiv der Kamera an dem erfassten Element bzw. betrachteten Objekt ist, desto genauer kann die Messung erfolgen. Demnach kann in näheren Bereichen sogar eine Genauigkeit von weniger als 1 mm erreicht werden.Preferably, all cameras have a resolution of at least 2 megapixels. The lenses used have a viewing angle of about 140 degrees and more. In addition, the exposure time of the cameras used in a wide range, for example, 0.25 msec to 8,000 msec (8 s) is freely adjustable. This allows adaptation to a wide variety of lighting conditions. Applicant's experiments have shown that a camera resolution of about 10 pixels per degree can be achieved. Based on a distance of one meter, an accuracy of 1.5 mm per pixel can be achieved. This in turn means that manipulation can be reliably detected from a reference deviation of as little as 2 to 3 mm. The closer the camera lens is to the detected element or object, the more accurate the measurement can be. Thus, in closer areas even an accuracy of less than 1 mm can be achieved.
Je nach Einsatzbereich des Geldautomatens, z.B. im Außenbereich oder im Innenbereich, sowie der gegebenen Lichtverhältnisse, kann es vorteilhaft sein, die Kamera CAMS eher im seitlichen Gehäuseteil des Geldautomatens ATM oder im oberen Gehäusebereich zu montieren. Auch ergeben sich je nach Kameraposition verschiedene Überwachungsmöglichkeiten. Bei der Überwachung der verschiedenen Elemente bzw. Teilbereiche wird insbesondere folgendes erreicht:Depending on the area of use of the ATM, e.g. in the outdoor or indoor area, as well as the given lighting conditions, it may be advantageous to mount the camera CAMs rather in the side case of the ATM ATM or in the upper housing area. Also arise depending on the camera position different monitoring options. When monitoring the various elements or subareas, the following is achieved in particular:
Das Erfassen des Geldausgabefachs (Shutter) 1 ermöglicht das Überprüfen von Manipulationen in Form sogenannter Cash- Trapper, d.h. spezieller Überbauten. Das Erfassen des Tastaturfeldes ermöglicht es, dort Manipulationsversuche durch Überbauten oder Veränderungen an Lichtschutzmaßnahmen und dergleichen festzustellen. Das Erfassen der Auflagefläche ermöglicht es insbesondere, Komplettüberbauen zu erkennen. Das Erfassen des Karteneingabetrichters 4, insbesondere durch eine darin integrierte Kamera, ermöglicht es, dortige Manipulationen zu erkennen.The detection of the cash dispenser (shutter) 1 makes it possible to check manipulations in the form of so-called cash trappers, i. special superstructures. The detection of the keypad makes it possible to determine there manipulation attempts by superstructures or changes to light protection measures and the like. The detection of the support surface makes it possible in particular to detect complete overbuilding. The detection of the card input funnel 4, in particular by a camera integrated therein, makes it possible to detect local manipulations.
Es hat sich gezeigt, dass insbesondere an dem Tastaturfeld und an dem Karteneingabetrichter bereits Abweichungen von 2 mm klar erkannt werden können. Abweichungen an der hinteren Außenkante der Auflagefläche können bereits ab 4 mm erkannt werden. Abweichungen an der unteren Kante des Shutters können bereits ab 8 mm erkannt werden.It has been shown that even deviations of 2 mm can be clearly recognized, especially on the keypad and on the card input hopper. Deviations at the rear outer edge of the support surface can already be detected from 4 mm become. Deviations at the lower edge of the shutter can already be detected from 8 mm.
Zum Erkennen von Manipulationen führt die Daten- Verarbeitungseinheit 10 (siehe Figur 4) insbesondere einen Vergleich der aufgenommenen Bilddaten D mit Referenzdaten durch. Dabei kann insbesondere ein Bild des Außenbereiches auf seine Homogenität hin untersucht und mit dem Bild des Außenbereiches der Bedienfeldkamera abgeglichen werden. Es werden auch die Bilddaten der verschiedenen Kameras CAMS, CAMD und/oder CAMK miteinander verglichen, um z.B. festzustellen, ob an einzelnen der Kameras manipuliert wurde. Wenn beispielsweise die Kamera CAMD abgedeckt wurde, ergibt sich eine Diskrepanz zu den Bildaufnahmen der anderen Kameras. Insbesondere kann anhand der Bildhelligkeiten sehr schnell festgestellt, ob eine Verdunklung nur an einer einzelnen Kamera auftritt, so dass eine Manipulation bzw. Abdeckung dieser Kamera anzunehmen ist. Die Kombination und Auswertung von mehreren Kamerasignalen bzw. Bilddaten erhöht die Robustheit der Manipulationsüberwachung und die Vermeidung von Fehlalarmen. Unter anderem können die Bilddaten bzw. -Informationen auch wie folgt genutzt werden:In order to detect manipulations, the data processing unit 10 (see FIG. 4) performs, in particular, a comparison of the recorded image data D with reference data. In this case, in particular, an image of the outside area can be examined for its homogeneity and compared with the image of the outside area of the control panel camera. Also, the image data of the various cameras CAMS, CAMD and / or CAMK are compared with each other, e.g. determine if any of the cameras have been tampered with. If, for example, the CAMD camera has been covered, the result is a discrepancy with the images of the other cameras. In particular, it can be determined very quickly on the basis of the image brightness whether a darkening occurs only on a single camera, so that a manipulation or cover of this camera is to be assumed. The combination and evaluation of several camera signals or image data increases the robustness of the manipulation monitoring and the avoidance of false alarms. Among other things, the image data or information can also be used as follows:
Unterscheidung von künstlicher und natürlicher Verdunklung: Wird eine Kamera abgedeckt, so steht ihr aufgenommenes Bild im Widerspruch zu den Bildern der anderen Kameras. Fällt das natürliche Licht (Tageslicht) oder das künstliche Licht (Raumbeleuchtung) aus, so ist der Effekt an allen Kameras gleich oder zumindest ähnlich. Andernfalls erkennt das System einen Manipulationsversuch. Erkennung von Täuschungsangriffen auf die Kamera- Anordnung, z.B. durch vorgeklebte Fotos: Zeigt eine einzelne Kamera ein anderes Bild (Helligkeit, Bewegung, Farben, insbesondere bezüglich des Außenbereichs), so deutet dies auf einenDistinction between artificial and natural obscuration: If a camera is covered, its recorded image is in conflict with the images of the other cameras. If the natural light (daylight) or the artificial light (room lighting) fails, the effect is the same or at least similar on all cameras. Otherwise, the system detects a tampering attempt. Detection of deceptive attacks on the camera arrangement, eg through pre-glued photos: If a single camera shows a different image (brightness, movement, colors, especially with regard to the outside area), this indicates one
Täuschungsversuch hin.Deception attempt.
Erhöhung der Robustheit, insbesondere bei Abdeckung des Karteneinschubtrichters: Wird dieser verdeckt, so zeigt die darin integrierte Kamera (s. CAMK in Fig.Increased robustness, especially when the card slot is covered: If it is covered, the integrated camera (see CAMK in Fig.
4a) ein anderes Bild an (insbesondere bezüglich des Außenbereiches) als die übrigen Kameras (s. CAMS, CAMD in Fig. 1) .4a) displays another image (in particular with regard to the outside area) than the other cameras (see CAMS, CAMD in FIG.
Weiterhin kann z.B. auch die Umgebung auf eine Abstrahlung der Beleuchtung für den Karteneingabetricher 4 untersucht werden. Die Anbindung des Systems an das Internet über die Schnittstelle 23 ermöglicht es, auch per Fernzugriff die Kamera bzw. die verschiedenen Kameras anzusteuern. Die gewonnenen Bilddaten können auch über den Internetanschluß an einen Video-Server übermittelt werden. Somit agiert die jeweilige Kamera guasi als virtuelle IP-Kamera. Die oben beschriebene CCTV-Einheit 20 dient insbesondere einer solchen Video-Überwachungsmöglichkeit, wobei die Schnittstelle 15 zur CCTV-Einheit für folegende Funktionen ausgelegt ist:Furthermore, e.g. Also, the environment to be examined for a radiation of lighting for the card entry 4. The connection of the system to the Internet via the interface 23 makes it possible to remotely control the camera or the various cameras. The acquired image data can also be transmitted via the Internet connection to a video server. Thus, the respective camera guasi acts as a virtual IP camera. In particular, the CCTV unit 20 described above is used for such a video surveillance facility, wherein the interface 15 to the CCTV unit is designed for the following functions:
Abfrage eines Bildes, Einstellen der Bildrate, des Farbmodells, der Bildauflösung, Auslösen eines Ereignisses im CCTV-Dienst bei Bereitstellung eines neuen Bildes und/oder eventuell eine visuelle Hervorhebung von erkannten Manipulationen auf einem bereitgestellten Bild. Das System ist so ausgelegt, dass im normalen Betrieb (z.B. Geldabheben, Kontostandsabfrage usw.) keine Fehlalarme durch Hände und/oder Gegenstände im Bild erzeugt werden. Deshalb wird die Manipulationserkennung im Zeitraum einer normalen Automatenbenutzung deaktiviert. Auch soll in Zeitbereichen, in denen beispielsweise eine Reinigung oder eine kurzfristige anderweitige Benutzung (Ablage von Kontoauszügen, Interaktionen vor und nach dem Start einer Transaktion) nicht zur Manipulationserkennung herangezogen werden. Im wesentlichen werden somit vorzugsweise nur starre und unbewegliche Manipulationsversuche analysiert und erkannt. Das System ist so ausgelegt, dass eine Überwachung auch bei unterschiedlichsten Lichtverhältnissen (Tag, Nacht, Regen, Bewölkung, usw.) funktioniert. Ebenfalls werden sich kurzzeitig verändernde Lichtverhältnisse, wie z.B. Lichtspiegelungen, Schattenverläufe und dergleichen, bei der Bildverarbeitung kompensiert bzw. ignoriert, um einen Fehlalarm zu vermeiden. Zudem können technisch auftretende Ereignisse, wie etwa das Ausfallen einer Beleuchtung und dergleichen, berücksichtigt werden. Diese und weitere Sonderfälle werden insbesondere durch die dritte Stufe zur Klassifikation erkannt und gelöst.Query an image, adjust frame rate, color model, image resolution, trigger an event in the CCTV service when a new image is provided, and / or possibly visually highlight detected manipulations on a rendered image. The system is designed so that no false alarms are generated by hands and / or objects in the picture during normal operation (eg withdrawing money, checking account balance, etc.). Therefore, the tamper detection is disabled during the period of normal machine use. Also, in time periods in which, for example, a cleaning or a short-term other use (storage of account statements, interactions before and after the start of a transaction) are not used for tamper detection. Essentially, therefore, only rigid and immovable manipulation attempts are preferably analyzed and recognized. The system is designed to work in a wide variety of lighting conditions (day, night, rain, cloudy, etc.). Also, briefly changing light conditions, such as light reflections, shadows and the like, are compensated or ignored during image processing to avoid a false alarm. In addition, technically occurring events, such as the failure of a lighting and the like, are taken into account. These and other special cases are recognized and solved in particular by the third stage for classification.
Das von dem beschriebenen System durchgeführte Verfahren zur Manipulationserkennung weist insbesondere folgenden Ablauf auf (s. auch Fig. 4) :The method for manipulation detection performed by the described system has in particular the following sequence (see also FIG.
Zunächst erfolgt in einem ersten Schritt eine Bildaufnahme (Stufe 11) , wobei die Kameraparameter eingestellt werden, um geeignete Aufnahmen zu erzeugen. Dabei wird insbesondere eine Reihe von Bildern bzw. entsprechende Bilddaten D aufgenommen, welche dann als Grundlage bzw. Referenz für die Vorverarbeitung dienen. Anschließend erfolgt eine Vorverarbeitung der Bilddaten DFirst, in a first step, an image acquisition (stage 11), wherein the camera parameters are adjusted to produce suitable recordings. In particular, a series of images or corresponding image data D is recorded, which then serves as the basis or reference for the preprocessing. Subsequently, a preprocessing of the image data D takes place
(Stufe 11) , wobei diese so verarbeitet werden, dass sie sich möglichst gut für die Weiterverarbeitung eignen. Dazu werden beispielsweise mehrere Bilder zu einem Zielbild zusammengesetzt und mittels Bildverbesserungsalgorithmen optimiert. Insbesondere werden dabei folgende Schritte ausgeführt :(Level 11), which are processed so that they are as good as possible for further processing. For this purpose, for example, several images are combined to form a target image and optimized by means of image enhancement algorithms. In particular, the following steps are carried out:
Schattenentfernung, Entfernung sich bewegender Objekte, Entfernung von Rauschen und/oder Zusammenfassung verschiedener belichteter Aufnahmen.Shadow removal, removal of moving objects, removal of noise and / or summary of various exposed shots.
Die Kameras werden u.a. auf unterschiedliche Belichtungs- zeiten eingestellt, um Reflektionen zu entfernen und um gut ausgeleuchtete Bereiche zu sammeln. Vorzugsweise werden die Bilder über einen vorbestimmten Zeitraum gesammelt, um möglichst gute Ausgangsbilder zur Manipulationserkennung zu gewinnen. In einem dritten Schritt wird eine Merkmalsextraktion durchgeführt (Stufe 12) , bei der Bildanalyseverfahren auf die vorverarbeiteten Bilder bzw. Bilddaten ausgeführt werden, um diese auf bestimmte Merkmale hin zu überprüfen, wie z.B. auf Kantenpositionen oder Farbverteilungen. Für jedes Merkmal kann eine Zahl bzw. ein Wert vorgegeben werden, der angibt, wie gut das entsprechende Merkmal in dem betrachteten Bild wieder gefunden wurde. Die Werte werden in einem sogenannten Merkmalsvektor zusammengefasst .The cameras are u.a. set to different exposure times to remove reflections and to collect well-lit areas. Preferably, the images are collected over a predetermined period of time to obtain the best possible output images for manipulation detection. In a third step, a feature extraction is performed (step 12) in which image analysis processes are performed on the preprocessed images to validate them for particular features, such as image analysis. on edge positions or color distributions. For each feature, a number or a value can be specified, which indicates how well the corresponding feature was found again in the viewed image. The values are summarized in a so-called feature vector.
In einem weiteren Schritt wird eine Klassifikation durchgeführt (Stufe 13), d.h. der Merkmalsvektor wird an einen Klassifikationsablauf übergeben, um eine Entscheidung zu treffen, ob eine Manipulation vorliegt oder nicht. Dabei werden auch solche Arten von Klassifikatoren benutzt, die Konfidenz, d.h. eine Wahrscheinlichkeit oder Sicherheit, angeben können, mit der die Entscheidung zutrifft. Verwendete Klassifikationsmechanismen können z.B. sein:In a further step, a classification is carried out (step 13), ie the feature vector is passed to a classification procedure to make a decision as to whether there is a manipulation or not. there Also, those types of classifiers are used which can indicate confidence, ie a probability or certainty, with which the decision applies. Classification mechanisms used can be, for example:
Learning Classify Systems, Bayes Klassfikatoren, Support Vector Machines (SVM) oder Entscheidungsbäume (CART bzw. C 4.5) .Learning Classify Systems, Bayes Classifiers, Support Vector Machines (SVM) or Decision Trees (CART or C 4.5).
Das hier beschriebene System wird vorzugsweise modular aufgebaut, um verschiedene Konfirgurationen zu ermöglichen. Die eigentliche Bildverarbeitung sowie die CCTV-Anbindung werden in verschiedenen Modulen realisiert (siehe Figur 4).The system described herein is preferably modular in design to allow for different configurations. The actual image processing and the CCTV connection are realized in different modules (see FIG. 4).
Das hier vorgestellte System ist auch dazu geeignet, die erkannten Manipulationen zu dokumentieren bzw. digital zu archivieren. Im Falle einer erkannten Manipulation werden die aufgenommenen Bilder mit entsprechenden Meta-Informationen, wie z.B. Zeitstempel, Art der Manipulation usw., auf einer Festplatte im System bzw. in einem angeschlossenen PC abgespeichert. Auch können zwecks eines Reportings Meldungen an eine Plattform weitergeleitet werden, wie z.B. Fehlermeldungen, Statusmeldungen (Deaktivierung, Moduswechsel) , Statistiken, Manipulationsverdacht und/oder Alarmmeldungen. Im Falle eines Alarms kann eine entsprechende Meldung mit der jeweiligen Alarmstufe an das Administrationsinterface bzw. die Schnittstelle weitergegeben werden. An dieser Schnittstelle werden außerdem noch folgende Möglichkeiten realisiert:The system presented here is also suitable for documenting the detected manipulations or digitally archiving them. In the case of a detected manipulation, the captured images are provided with corresponding meta information, such as. Timestamp, type of manipulation, etc., stored on a hard disk in the system or in a connected PC. Also, for reporting purposes, messages may be forwarded to a platform, e.g. Error messages, status messages (deactivation, mode change), statistics, suspected manipulation and / or alarm messages. In the event of an alarm, a corresponding message with the respective alarm level can be forwarded to the administration interface or the interface. The following options are also implemented at this interface:
Abfrage von Kameradaten, wie z.B. Anzahl der Kameras, Bauzustand, Seriennummer, usw., Kamerastammdaten bzw. Einstellen von Kameraparametern und/oder Registrierung für Alarme (Notifikationen) .Query of camera data, such as number of cameras, construction status, serial number, etc., camera master data or Set camera parameters and / or register for alarms (notifications).
Die hier vorgestellte Erfindung ist insbesondere dazu geeignet, feindliche Manipulationen an einem Selbstbedienungsterminal, wie z.B. an einem Geldautomaten, zuverlässig zu erkennen. Hierzu wird das Bedienfeld durch mindestens eine Kamera kontinuierlich und automatisch überwacht. Mittels einer Bilddatenverarbeitung werden die von der Kamera erfassten Elemente optisch vermessen, um Abweichungen von Referenzdaten zu erkennen. Es hat sich gezeigt, dass bereits Abweichungen im Millimeterbereich sicher erkannt werden können. Für die Erkennung von Fremdobjekten wird vorzugsweise eine Kombination aus Kantendetektion und Segmentierung benutzt, so dass Konturen von zurückgelassenen Gegenständen klar erkannt und markiert werden können. Im Falle eines Manipulationsversuches können Gegenmaßnahmen bzw. Aktionen ausgelöst werden.The invention presented here is particularly suitable for carrying out hostile manipulations on a self-service terminal, such as e.g. at an ATM, reliable to recognize. For this purpose, the control panel is continuously and automatically monitored by at least one camera. By means of image data processing, the elements detected by the camera are optically measured in order to detect deviations from reference data. It has been shown that even deviations in the millimeter range can be reliably detected. For the detection of foreign objects, a combination of edge detection and segmentation is preferably used, so that contours of left objects can be clearly recognized and marked. In the case of a manipulation attempt countermeasures or actions can be triggered.
Durch die hier vorgeschlagene Kombination mehrerer Kameras und der intelligenten Bilddatenverarbeitung erhöht die Erfindung deutlich die Zuverlässigkeit, mit der Manipulationen erkannt werden können.By the combination of several cameras proposed here and the intelligent image data processing, the invention significantly increases the reliability with which manipulations can be detected.
In einer bevorzugten Ausführungsform weist die Erfindung folgende Kamera-Anordnung auf:In a preferred embodiment, the invention has the following camera arrangement:
Eine Kamera am Karteneingabetrichter, eine Kamera am Bedienfeld und eine Kamera im oberen Bereich des Geldautomaten zum Aufnehmen von Portraitfotos bzw. -videos. Außerdem sind die Kameras mit der beschriebenen Datenverarbeitungseinheit verbunden. Innerhalb der Datenverarbeitungseinheit werden die von den Kameras gewonnenen Bilddaten bzw. Informationen unter anderem wie folgt genutzt:A camera on the card slot, a camera on the control panel, and a camera on the top of the ATM for taking portraits or videos. In addition, the cameras are connected to the described data processing unit. Within the data processing unit are those of the cameras obtained image data or information among other things used as follows:
Erkennung bzw. Unterscheidung von künstlicher und natürlicher Verdunklung: Wird eine Kamera abgedeckt, so widerspricht sich ihr aufgenommenes Bild mit den Bildern aus den Kameras . Fällt natürliches oder künstliches Licht aus, so tritt dieser Effekt bei allen Kameras gleichermaßen auf. Erkennung von Täuschungsangriffen auf das Kamerasystem, z.B. durch vorgeklickte Fotos: Zeigt eine Kamera ein anderes Bild (unterschiedliche Helligkeit, Bewegung, Farben, usw. ) , so deutet dies auf einen Täuschungsversuch hin. Erhöhung der Robustheit der Abdeckungserkennung am Karteneingabetrichter: Wird der Karteneingabetrichter verdeckt, so zeigt die dort integrierte Kamera CAMK ein anderes Bild des Außenbereichs an, als dies die übrigen Kameras tun.Recognition or distinction of artificial and natural obscuration: If a camera is covered, its captured image contradicts the images from the cameras. If natural or artificial light fails, this effect is equally noticeable on all cameras. Detection of deception attacks on the camera system, e.g. through pre-clicked photos: If a camera displays a different picture (different brightness, movement, colors, etc.), this indicates an attempt to deceive. Increasing the robustness of the cover detection on the card input hopper: If the card slot is hidden, the integrated camera CAMK displays a different image of the outside area than the other cameras do.
Die Erhöhung der Zuverlässigkeit der Erkennung von Manipulationsversuchen dient auch dazu, Fehlalarme zu vermeiden.Increasing the reliability of detection of tampering attempts also serves to avoid false alarms.
Zusammenfassend wird ein Selbstbedienungsterminal mit einer Kamera-Anordnung vorgeschlagen, die mehrere Kameras aufweist, welche im Nahbereich des Bedienfeldes des Selbst- bedienungsterminals montiert sind und dort vorgesehene Elemente, wie z.B. Tastatur, Geldausgabefach, Karteneinschubtrichter erfassen, um Manipulationsversuchen an dem Selbstbedienungsterminal zu erkennen. Vorzugsweise ist eine der Kameras in dem Karteneinschubtrichter integriert. Die Kameras sind mit einer Datenverarbeitungseinheit verbunden, die die von den Kameras erzeugten Bilddaten verarbeitet. Die Bilddaten werden auch kombiniert und auswertet, um Manipulationen an einer oder mehreren der Kameras zu erkennen. Insbesondere werden hierzu Abweichungen ausgewertet, die den Bildinhalt, den Bildaufbau und/oder die Bildqualität, insbesondere die Bildausleuchtung und/oder Helligkeit, betreffen.In summary, a self-service terminal with a camera arrangement is proposed, which has a plurality of cameras, which are mounted in the vicinity of the control panel of the self-service terminal and detect there provided elements, such as keyboard, cash dispenser, card slot to detect tampering attempts on the self-service terminal. Preferably, one of the cameras is integrated in the card insertion hopper. The cameras are connected to a data processing unit which processes the image data generated by the cameras. The image data is also combined and evaluated to allow manipulation of one or more of the cameras detect. In particular, for this purpose, deviations are evaluated which relate to the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness.
Die vorliegende Erfindung wurde am Beispiel eines Geldautomaten beschrieben, ist aber nicht hierauf beschränkt, sondern kann auf jede Art von Selbstbedienungsterminals angewendet werden. The present invention has been described using the example of an ATM, but is not limited thereto, but can be applied to any type of self-service terminals.
BezugszeichenlisteLIST OF REFERENCE NUMBERS
ATM Selbstbedienungsterminal, als Geldautomat ausgebildet, mit einem Bedienfeld CP, das u.a. aufweist:ATM self-service terminal, designed as an ATM, with a control panel CP, ia. having:
1 Geldausgabefach1 cash dispenser
2 Tastatur2 keyboard
3 Ablagefläche3 shelf space
4 Karteneingabetrichter 5 Bildschirm4 card entry funnel 5 screen
sowie eine Kamera-Anordnung mit:as well as a camera arrangement with:
CAMS Kamera, seitlich des Bedienfeldes montiert CAMD Kamera, oberhalb des Bedienfeldes montiert CAMK Kamera, im Karteneingabetrichter montiertCAMS camera, side of the control panel mounted CAMD camera, mounted above the control panel CAMK camera, mounted in the card slot
CAMO zusätzliche Portrait-KameraCAMO additional portrait camera
10 Datenverarbeitungseinheit mit:10 data processing unit with:
11 erster Stufe zur Bildverarbeitung 12 zweiter Stufe zur Merkmalsextraktion11 first stage image processing 12 second stage feature extraction
13 dritte Stufe zur Klassifikation 14, 15 Schnittstellen zu Videoüberwachung (CCTV) bzw. Bildfälschungserkennung13 third stage for classification 14, 15 Interfaces to video surveillance (CCTV) or image counterfeit detection
20 Videoüberwachungs- bzw. CCTV-Einheit mit:20 Video surveillance or CCTV unit with:
21 Stufe für Bildaufnahme21 level for image recording
22 Stufe für Komprimierung22 level for compression
23 Schnittstelle zu einen IP-Netz23 Interface to an IP network
24 Stufe für Parametrisierung 24 level for parameterization

Claims

Patentansprüche claims
1. Selbstbedienungsterminal (ATM), das in einem Bedienfeld des Selbstbedienungsterminals (ATM) vorgesehene1. Self-service terminal (ATM) provided in a control panel of the self-service terminal (ATM)
5 Elemente (1, 2, 3, 4, 5) aufweist, die für Nutzer des5 elements (1, 2, 3, 4, 5), which are for users of
Selbstbedienungsterminals (ATM) bereit gestellt sind, wobei. eine Kamera-Anordnung mit mehreren Kameras zur Überwachung des Selbstbedienungsterminals (ATM) vorgesehen ist, n dadurch gekennzeichnet, dass zum Erkennen von Manipulationsversuchen an dem Selbstbedienungsterminal (ATM) zumindest zwei (CAMS, CAMD, CAMK) der Kameras an oder in dem Selbstbedienungsterminal (ATM) im Nahbereich des 5 Bedienfeldes (CP) montiert sind und jeweils mindestens eines der Elemente (1, 2, 3, 4, 5) erfassen.Self-service terminals (ATM) are provided, wherein. a camera arrangement with a plurality of cameras for monitoring the self-service terminal (ATM) is provided, n characterized in that for detecting tampering attempts on the self-service terminal (ATM) at least two (CAMS, CAMD, CAMK) of the cameras on or in the self-service terminal (ATM ) are mounted in the vicinity of the control panel (CP) and in each case at least one of the elements (1, 2, 3, 4, 5) detect.
2. Selbstbedienungsterminal (ATM) nach Anspruch 1, dadurch gekennzeichnet, dass die zumindest zwei Kameras (CAMS, 0 CAMD, CAMK) mit einer Datenverarbeitungseinheit (10) verbunden sind, die die von den Kameras erzeugten Bilddaten (D) verarbeitet.2. Self-service terminal (ATM) according to claim 1, characterized in that the at least two cameras (CAMS, CAMD CAM, CAM) are connected to a data processing unit (10) which processes the image data generated by the camera (D).
3. Selbstbedienungsterminal (ATM) nach Anspruch 1 oder 2, ""3 dadurch gekennzeichnet, dass die von den Kameras erfassten Elemente manipulationsgeeignete Elemente (1, 2, 4) darstellen und/oder in manipulationsgeeigneten Bereichen des Bedienfeldes (CP) angeordnete Elemente (3, 5) darstellen. 303. self-service terminal (ATM) according to claim 1 or 2, "" characterized in 3 that the areas covered by the cameras elements manipulation suitable elements (1, 2, 4) constitute and / or manipulation appropriate areas of the control panel (CP) arranged elements (3 , 5). 30
4. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die in dem Bedienfeld vorgesehenen Elemente ein Geldausgabefach (1), eine Tastatur (2), eine Ablagefläche (3), einen Karteneingabetrichter (4) und/oder einen Bildschirm (5) umfassen.4. Self-service terminal (ATM) according to one of the preceding claims, characterized in that the elements provided in the control panel comprise a cash dispenser (1), a keyboard (2), a shelf (3), a card entry hopper (4) and / or a screen (5).
5. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zumindest zwei (CAMS, CAMD) der Kameras in einem das Bedienfeld (CP) umgebenden Gehäuseabschnitt des Selbstbedienungsterminals (ATM) montiert sind, insbesondere in demjenigen Gehäuseabschnitt des Selbstbedienungsterminals (ATM) installiert sind, der das Bedienfeld (CP) seitlich oder nach Oben begrenzt.5. Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least two (CAMS, CAMD) of the cameras are mounted in a control panel (CP) surrounding the housing section of the self-service terminal (ATM), in particular in that housing section of the self-service terminal (ATM ), which limits the control panel (CP) to the side or to the top.
6. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass jede der Kameras (CAMS, CAMD, CAMK) jeweils auf mindestens eines der im Bedienfeld (CP) vorgesehenen Elemente (1, 2, 4) ausgerichtet ist.6. Self-service terminal (ATM) according to one of the preceding claims, characterized in that each of the cameras (CAMS, CAMD, CAMK) is aligned in each case on at least one of the control panel (CP) provided elements (1, 2, 4).
7. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zumindest eine (CAMS) der Kameras so ausgerichtet ist, und dass diese Kamera (CAMS) zumindest zwei der im Bedienfeld (CP) vorgesehenen Elemente (1, 2) erfasst, insbesondere Bedienelemente erfasst, die ein Geldausgabefach (1) und eine Tastatur (2) umfassen.7. Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least one (CAMS) of the cameras is aligned, and that this camera (CAMS) detects at least two of the control panel (CP) provided elements (1, 2) , in particular controls detected, comprising a cash dispenser (1) and a keyboard (2).
8. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zumindest eine (CAMK) der Kameras in einem der im Bedienfeld (CP) vorgesehenen Elemente (4) integriert ist, insbesondere in einen Karteneingabetrichter (4) integriert ist.8. Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least one (CAMK) of the cameras in one of the control panel (CP) provided elements (4) is integrated, in particular in a card entry funnel (4) is integrated.
9. Selbstbedienungsterminal (ATM) nach einem der Ansprüche 2 bis 8, dadurch gekennzeichnet, dass die Datenverarbeitungseinheit (10) in das9. self-service terminal (ATM) according to one of claims 2 to 8, characterized in that the data processing unit (10) in the
Selbstbedienungsterminal (ATM) integriert ist.Self-service terminal (ATM) is integrated.
10. Selbstbedienungsterminal (ATM) nach Anspruch 2 oder 9, dadurch gekennzeichnet, dass die Datenverarbeitungseinheit (10) eine die Bilddaten (D) empfangende erste Stufe (11) zur Bildverarbeitung, insbesondere zur Schattenentfernung, Kantendetektion, Vektorisierung und/oder Segmentierung, aufweist.10. Self-service terminal (ATM) according to claim 2 or 9, characterized in that the data processing unit (10) receiving the image data (D) first stage (11) for image processing, in particular for shadow removal, edge detection, vectorization and / or segmentation has.
11. Selbstbedienungsterminal (ATM) nach Anspruch 10, dadurch gekennzeichnet, dass die11. Self-service terminal (ATM) according to claim 10, characterized in that the
Datenverarbeitungseinheit (10) eine der ersten Stufe (11) nachgeschaltete zweite Stufe (12) zurData processing unit (10) of the first stage (11) downstream second stage (12) for
Merkmalsextraktion, insbesondere mittels Blobanalyse, Kantenposition und/oder Farbverteilung, aufweist.Feature extraction, in particular by means of blob analysis, edge position and / or color distribution.
12. Selbstbedienungsterminal (ATM) nach Anspruch 11, dadurch gekennzeichnet, dass die Datenverarbeitungseinheit (10) eine der zweiten Stufe (12) nachgeschaltete dritte Stufe (13) zur12. Self-service terminal (ATM) according to claim 11, characterized in that the data processing unit (10) of the second stage (12) downstream third stage (13) for
Klassifikation aufweist.Classification has.
13. Selbstbedienungsterminal (ATM) nach einem der Ansprüche 9 bis 12, dadurch gekennzeichnet, dass die Datenverarbeitungseinheit (10) Schnittstellen (14, 15) für Videoüberwachungssysteme (20) und/oder Sicherheitssysteme aufweist. 13. Self-service terminal (ATM) according to one of claims 9 to 12, characterized in that the data processing unit (10) has interfaces (14, 15) for video surveillance systems (20) and / or security systems.
14. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zumindest die von der jeweiligen Kamera (CAMS) erfassten Elemente (1, 2) optisch eindeutig erkennbare Merkmale aufweisen, insbesondere sich von homogenen14. Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least the elements (1, 2) detected by the respective camera (CAMS) have optically clearly recognizable features, in particular of homogeneous ones
Flächen abgrenzende Kanten aufweisen.Have surfaces delimiting edges.
15. Selbstbedienungsterminal (ATM) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass an dem Selbstbedienungsterminal (ATM) eine zusätzliche15. Self-service terminal (ATM) according to one of the preceding claims, characterized in that at the self-service terminal (ATM) an additional
Kamera (CAMO) für einen Bereich vorgesehen ist, an dem ein Benutzer, insbesondere sein Kopf, sich während der Bedienung des Selbstbedienungsterminals (ATM) befindet.Camera (CAMO) is provided for an area where a user, especially his head, is located during the operation of the self-service terminal (ATM).
16. Selbstbedienungsterminal (ATM) nach einem der Ansprüche 2 bis 15, dadurch gekennzeichnet, dass die Datenverarbeitungseinheit (10), wenn sie mittels der Verarbeitung der Bilddaten (D) einen Manipulationsversuch an den erfassten Elementen (1, 2) erkennt, einen Alarm auslöst, das16. Self-service terminal (ATM) according to one of claims 2 to 15, characterized in that the data processing unit (10), when it detects a manipulation attempt on the detected elements (1, 2) by means of the processing of the image data (D), triggers an alarm , the
Selbstbedienungsterminal (ATM) sperrt und/oder die zusätzliche Kamera (CAMO) auslöst.Self-service terminal (ATM) locks and / or the additional camera (CAMO) triggers.
17. Selbstbedienungsterminal (ATM) nach einem der Ansprüche 2 bis 16, dadurch gekennzeichnet, dass die jeweilige17. Self-service terminal (ATM) according to one of claims 2 to 16, characterized in that the respective
Kamera (CAMS) und/oder die Datenverarbeitungseinheit (10) während der Bedienung und/oder Wartung des Selbstbedienungsterminal (ATM) deaktiviert ist.Camera (CAMS) and / or the data processing unit (10) during operation and / or maintenance of the self-service terminal (ATM) is disabled.
18. Kamera-Anordnung für ein Selbstbedienungsterminal (ATM) , das in einem Bedienfeld des18. Camera arrangement for a self-service terminal (ATM) operating in a control panel of the
Selbstbedienungsterminals (ATM) vorgesehene Elemente (1, 2, 3, 4, 5) aufweist, die für Nutzer des Selbstbedienungsterminals (ATM) bereit gestellt sind, wobei die Kamera-Anordnung mit mehreren Kameras zur Überwachung des Selbstbedienungsterminals (ATM) vorgesehen ist, dadurch gekennzeichnet, dass zum Erkennen von Manipulationsversuchen an dem Selbstbedienungsterminal (ATM) zumindest zwei (CAMS, CAMD, CAMK) der Kameras an oder in dem Selbstbedienungsterminal (ATM) im Nahbereich des Bedienfeldes (CP) montiert sind und jeweils mindestens eines der Elemente (1, 2, 3, 4, 5) erfassen.Self-service terminals (ATM) provided elements (1, 2, 3, 4, 5), which are for users of the Self-service terminals (ATM) are provided, wherein the camera arrangement with several cameras for monitoring the self-service terminal (ATM) is provided, characterized in that for detecting tampering attempts on the self-service terminal (ATM) at least two (CAMS, CAMD, CAMK) Cameras are mounted on or in the self-service terminal (ATM) in the vicinity of the control panel (CP) and each detect at least one of the elements (1, 2, 3, 4, 5).
19. Kamera-Anordnung nach Anspruch 18, dadurch gekennzeichnet, dass die zumindest zwei Kameras (CAMS, CAMD, CAMK) in dem Selbstbedienungsterminal (ATM) integriert sind.19. Camera arrangement according to claim 18, characterized in that the at least two cameras (CAMS, CAMD, CAMK) are integrated in the self-service terminal (ATM).
20. Kamera-Anordnung nach Anspruch 18 oder 19, dadurch gekennzeichnet, dass die zumindest zwei Kameras (CAMS, CAMD, CAMK) mit einer Datenverarbeitungseinheit (10) verbunden sind, die die von den Kameras erzeugten Bilddaten (D) verarbeitet. 20. Camera arrangement according to claim 18 or 19, characterized in that the at least two cameras (CAMS, CAMD, CAMK) are connected to a data processing unit (10) which processes the image data (D) generated by the cameras.
PCT/EP2010/055011 2009-04-22 2010-04-16 Automated teller machine comprising camera arrangement to detect manipulation attempts WO2010121954A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP10715523.6A EP2422324B1 (en) 2009-04-22 2010-04-16 Automated teller machine comprising camera arrangement to detect manipulation attempts

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102009018321.3 2009-04-22
DE200910018321 DE102009018321A1 (en) 2009-04-22 2009-04-22 Self-service terminal with camera arrangement for detecting tampering attempts

Publications (1)

Publication Number Publication Date
WO2010121954A1 true WO2010121954A1 (en) 2010-10-28

Family

ID=42269645

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2010/055011 WO2010121954A1 (en) 2009-04-22 2010-04-16 Automated teller machine comprising camera arrangement to detect manipulation attempts

Country Status (3)

Country Link
EP (1) EP2422324B1 (en)
DE (1) DE102009018321A1 (en)
WO (1) WO2010121954A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112542007A (en) * 2020-11-30 2021-03-23 福州外语外贸学院 Dangerous target detection method and system between financial withdrawals

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010060624A1 (en) * 2010-11-17 2012-05-24 Wincor Nixdorf International Gmbh Method and device for the prevention of manipulation attempts on a camera system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2351585A (en) * 1999-06-29 2001-01-03 Ncr Int Inc Fraud protection for a self-service terminal
US6583813B1 (en) 1998-10-09 2003-06-24 Diebold, Incorporated System and method for capturing and searching image data associated with transactions
WO2007093977A1 (en) * 2006-02-13 2007-08-23 Fraudhalt Limited Method and apparatus for automated video surveillance
EP1965361A2 (en) * 2007-03-01 2008-09-03 Fonoklik Iletisim Hizmetleri Ve Ticaret Anonim An electronic transaction and application terminal with visual identification checking capability

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB351585A (en) * 1930-04-02 1931-07-02 Ig Farbenindustrie Ag Manufacture of an azo-dyestuff
DE19750644A1 (en) * 1997-11-14 1999-05-27 Leicher Gmbh & Co Deposit machine
DE20102477U1 (en) * 2000-02-22 2001-05-03 Wincor Nixdorf Gmbh & Co Kg Device for protecting self-service machines against manipulation
AT408377B (en) * 2000-03-31 2001-11-26 Oesterr Forsch Seibersdorf METHOD AND DEVICE FOR TESTING OR EXAMINATION OF OBJECTS
DE102006040966A1 (en) * 2006-08-31 2008-03-20 Wincor Nixdorf International Gmbh Self-service device particularly automatic cash dispenser and information or transaction terminals, has control panel with one or multiple components and monitoring device for recognition of manipulations in fraudulent intention

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6583813B1 (en) 1998-10-09 2003-06-24 Diebold, Incorporated System and method for capturing and searching image data associated with transactions
GB2351585A (en) * 1999-06-29 2001-01-03 Ncr Int Inc Fraud protection for a self-service terminal
WO2007093977A1 (en) * 2006-02-13 2007-08-23 Fraudhalt Limited Method and apparatus for automated video surveillance
EP1965361A2 (en) * 2007-03-01 2008-09-03 Fonoklik Iletisim Hizmetleri Ve Ticaret Anonim An electronic transaction and application terminal with visual identification checking capability

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112542007A (en) * 2020-11-30 2021-03-23 福州外语外贸学院 Dangerous target detection method and system between financial withdrawals

Also Published As

Publication number Publication date
DE102009018321A1 (en) 2010-10-28
EP2422324A1 (en) 2012-02-29
EP2422324B1 (en) 2019-02-27

Similar Documents

Publication Publication Date Title
EP2422328B1 (en) Automated teller machine comprising at least one camera to detect manipulation attempts
EP2422325B1 (en) Automated teller machine comprising at least one camera that produces image data to detect manipulation attempts
WO2010121951A1 (en) Automated teller machine comprising camera to detect manipulation attempts
EP2422326A1 (en) Method for recognizing attempts at manipulating a self-service terminal, and data processing unit therefor
EP2897112B1 (en) Method and apparatus for the prevention of false alarms in monitoring systems
CN105979210B (en) A kind of pedestrian's identifying system based on the more ball video camera arrays of multiple gun
DE102008039130A1 (en) Automatic tracing and identification system for movable object e.g. human, in building, has safety monitoring sensor connected with safety monitoring system such that tracing camera receives desired data when sensor is operated
CH695003A5 (en) Method and apparatus for protecting ATMs against manipulation.
EP2736026A1 (en) Device for reading out a magnetic strip and/or chip card with a camera for detecting inserted skimming modules
EP2603905B1 (en) Method and device for detecting and verifying attempts to manipulate a self-service terminal
EP2503354A1 (en) Self-service terminal and method for monitoring a user living area
EP2422324B1 (en) Automated teller machine comprising camera arrangement to detect manipulation attempts
DE20318489U1 (en) Monitoring system for use with cashpoint machines has pair of digital image capture units to observe user
EP3142039A2 (en) Self-service terminal with card reader and method for monitoring
DE102010060473A1 (en) Method for controlling image acquisition in cash dispenser, involves triggering alarm if probability for disturbing intervention in operation of cash dispenser exceeds threshold
DE102009044872A1 (en) Device for avoiding manipulation at automated teller machine in bank, has evaluation unit evaluating images recorded by camera and examining images automatically on suspicious image components

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10715523

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2010715523

Country of ref document: EP