DE102009018321A1

DE102009018321A1 - Self-service terminal with camera arrangement for detecting tampering attempts

Info

Publication number: DE102009018321A1
Application number: DE200910018321
Authority: DE
Inventors: Steffen Dipl.-Inform. Dr.rer.nat. Priesterjahn; Dinh-Khoi Dipl.-Inform. Dr.rer.nat. Le; Michael Nolte; Alexander Dipl.-Inform. Drichel
Original assignee: Wincor Nixdorf International GmbH
Current assignee: Wincor Nixdorf International GmbH
Priority date: 2009-04-22
Filing date: 2009-04-22
Publication date: 2010-10-28
Also published as: EP2422324A1; EP2422324B1; WO2010121954A1

Abstract

Vorgeschlagen wird ein Selbstbedienungsterminal mit einer Kamera-Anordnung, die mehrere Kameras (CAMS, CAMD, CAMK) aufweist, welche im Nahbereich des Bedienfeldes des Selbstbedienungsterminals montiert sind und dort vorgesehene Elemente, wie z.B. Tastatur, Geldausgabefach, Karteneinschubtrichter erfassen, um Manipulationsversuchen an dem Selbstbedienungsterminal zu erkennen. Vorzugsweise ist eine der Kameras (CAMK) in dem Karteneinschubtrichter integriert. Die Kameras (CAMS, CAMD, CAMK) sind mit einer Datenverarbeitungseinheit (10) verbunden, die die von den Kameras erzeugten Bilddaten (D) verarbeitet. Die Bilddaten werden auch kombiniert und ausgewertet, um Manipulationen an einer oder mehreren der Kameras zu erkennen. Insbesondere werden hierzu Abweichungen ausgewertet, die den Bildinhalt, den Bildaufbau und/oder die Bildqualität, insbesondere die Bildausleuchtung und/oder Helligkeit, betreffen.It proposes a self-service terminal with a camera arrangement comprising a plurality of cameras (CAMS, CAMD, CAMK) which are mounted in the vicinity of the control panel of the self-service terminal and there provided elements such. Detect the keyboard, cashbox, card slot to detect tampering with the self-service terminal. Preferably, one of the cameras (CAMK) is integrated in the card insertion hopper. The cameras (CAMS, CAMD, CAMK) are connected to a data processing unit (10) which processes the image data (D) generated by the cameras. The image data is also combined and evaluated to detect tampering on one or more of the cameras. In particular, for this purpose deviations are evaluated which relate to the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness.

Description

Die Erfindung betrifft ein Selbstbedienungsterminal sowie eine Kamera-Anordnung zum Erkennen von Manipulationsversuchen nach dem Oberbegriff eines der nebengeordneten Ansprüche. Insbesondere betrifft die Erfindung ein Selbstbedienungsterminal, das als Geldautomat ausgestaltet ist.The The invention relates to a self-service terminal and a camera arrangement for detecting manipulation attempts according to the preamble of the sibling claims. In particular, the Invention a self-service terminal that designed as an ATM is.

Im Bereich von Selbstbedienungsautomaten, insbesondere Geldautomaten, werden häufig kriminelle Handlungen in Form von Manipulationen vorgenommen, die das Ziel verfolgen, sensitive Daten, insbesondere PINs (Personal Identification Numbers) und/oder Kartennummern, von Nutzern des Selbstbedienungsterminals auszuspähen. Insbesondere sind Manipulationsversuche bekannt, bei denen sogenannte Skimming-Vorrichtungen, wie beispielsweise Tastaturüberbauten und dergleichen, im Bedienbereich bzw. Bedienfeld widerrechtlich installiert werden. Solche Tastaturüberbauten verfügen häufig über eine eigene Stromversorgung, sowie einen Prozessor, einen Speicher und ein Betriebsprogramm, sodass ein ahnungsloser Nutzer bei Eingabe seiner PIN oder beim Einführen seiner Bankkarte ausgespäht wird. Die ausgespähten Daten werden dann über einen in dem Tastaturüberbau integrierten Sender an einen entfernten Empfänger übertragen oder werden in einem im Tastaturüberbau befindlichen Datenspeicher gespeichert. Viele der heutzutage anzutreffenden Skimming-Vorrichtungen können nur sehr schwer mit dem menschlichen Auge von originalen Bedienelementen (Tastatur, Kartenleser usw.) unterschieden werden.in the Area of self-service machines, in particular ATMs, are often criminal acts in the form of manipulations which are aimed at sensitive data, in particular PINs (Personal Identification Numbers) and / or card numbers, from To spy on users of the self-service terminal. Especially are manipulation attempts known in which so-called skimming devices, such as keyboard superstructures and the like, be installed illegally in the operating area or control panel. Such keyboard superstructures often have its own power supply, as well as a processor, a memory and an operating program, allowing an unsuspecting user to enter spied out his PIN or when inserting his bank card becomes. The spied out data is then over an integrated in the keyboard superstructure transmitter to a remote receivers are transferred or in stored in a keyboard overlay data storage. Many of today's skimming devices can very difficult with the human eye of original controls (Keyboard, card reader, etc.) can be distinguished.

Um derartige Manipulationsversuche zu vereiteln, werden häufig Überwachungssysteme eingesetzt, die mehrere Kameras aufweisen, welche den Bedienbereich des jeweiligen Selbstbedienungsterminals erfassen. Eine solche Lösung ist beispielsweise in der US 6,583,813 B1 beschrieben. Mittels der dortigen Kamera-Anordnung kann das Selbstbedienungsterminal aus verschiedenen Blickwinkeln überwacht werden. Dennoch ist es im Einzelfall recht schwierig, einen Manipulationsversuch sofort und sicher zu erkennen, um die Nutzer der Selbstbedienungsautomaten sowie den Betreiber vor Schaden zu bewahren. Insbesondere ist nicht ohne weiteres anhand solcher Kameraüberwachungen zu erkennen, ob auch an den Kameras selbst Manipulationen durchgeführt worden sind.In order to thwart such manipulation attempts, monitoring systems are often used which have a plurality of cameras which detect the operating area of the respective self-service terminal. Such a solution is for example in the US 6,583,813 B1 described. By means of the local camera arrangement, the self-service terminal can be monitored from different angles. Nevertheless, in individual cases it is quite difficult to immediately and reliably detect a manipulation attempt in order to protect the users of the self-service machines and the operator from damage. In particular, it is not readily apparent from such camera monitors whether manipulations have also been carried out on the cameras themselves.

Demnach ist es Aufgabe der vorliegenden Erfindung, eine verbesserte Anordnung vorzuschlagen, die ein sicheres Erkennen von Manipulationsversuchen erlaubt.Therefore It is an object of the present invention, an improved arrangement to propose a secure detection of manipulation attempts allowed.

Gelöst wird die Aufgabe durch ein Selbstbedienungsterminal mit den Merkmalen des Anspruchs 1 bzw. durch eine Kamera-Anordnung mit den Merkmalen des nebengeordneten Anspruchs.Solved The task is performed by a self-service terminal with the features of claim 1 or by a camera arrangement with the features of the sibling claim.

Demnach wird ein Selbstbedienungsterminal vorgeschlagen, das in einem Bedienfeld des Selbstbedienungsterminals vorgesehene Elemente aufweist, die für Nutzer des Selbstbedienungsterminals bereit gestellt sind, und das eine Kamera-Anordnung aufweist, wobei zum Erkennen von Manipulationsversuchen an dem Selbstbedienungsterminal zumindest zwei der Kameras an oder in dem Selbstbedienungsterminal im Nahbereich des Bedienfeldes montiert sind und jeweils mindestens eines der Elemente erfassen. Bei den von den Kameras erfassten Elementen handelt es sich beispielsweise um manipulationsgeeignete Elemente, wie etwa Tastatur, Geldausgabefach oder Karteneingabetrichter, also um Bedienelemente im engeren Sinne. Es kann sich auch um in manipulationsgeeigneten Bereichen des Bedienfeldes angeordnete Elemente handeln, wie z. B. eine Ablagefläche oder dergleichen. Vorzugsweise sind die zumindest zwei Kameras in dem Selbstbedienungsterminal integriert und mit einer Datenverarbeitungseinheit verbunden, die die von den Kameras erzeugten Bilddaten verarbeitet.Therefore a self-service terminal is proposed in a control panel the self-service terminal provided elements that provided for users of the self-service terminal and having a camera arrangement, wherein for detecting of manipulation attempts on the self-service terminal at least two of the cameras on or in the self-service terminal at close range of the control panel are mounted and at least one of each Capture elements. The elements covered by the cameras act These are, for example, manipulation-suitable elements, such as Keyboard, cash box or card slot, so around controls in the narrow sense. It can also be in manipulation-suitable Areas of the control panel arranged elements act such. B. a shelf or the like. Preferably, the at least two cameras integrated in the self-service terminal and connected to a data processing unit corresponding to those of the Cameras processed image data processed.

Somit wird mittels einer aus zwei oder mehr Kameras bestehenden Anordnung der Nahbereich des Bedienfeldes erfasst, so dass Bilddaten, die direkt an den einzelnen Elementen erfasst werden, zur Datenverarbeitung zur Verfügung stehen. Dabei können einzelne der Kameras gezielt z. B. auf ein bestimmtes Bedienelement ausgerichtet sein oder sogar in einem Bedienelement integriert sein.Consequently is by means of an arrangement consisting of two or more cameras the close range of the control panel is captured so that image data, the be captured directly on the individual elements, for data processing be available. It can individual of the Cameras targeted z. B. aligned to a specific control be or even be integrated in a control.

Vorzugsweise ist vorgesehen, dass die Datenverarbeitungseinheit die von den mehreren Kameras erzeugten Bilddaten kombiniert und auswertet, um Manipulationen an einer oder mehreren der Kameras zu erkennen. Auch können durch Kombination und Auswertung der Bilddaten Manipulationen im Erfassungsbereich einer oder mehrerer der Kameras erkannt werden. Insbesondere kann die Datenverarbeitungseinheit die Bilddaten kombinieren und auswerten, um Abweichungen zu erkennen, die den Bildinhalt, den Bildaufbau und/oder die Bildqualität, insbesondere die Bildausleuchtung und/oder Helligkeit, betreffen.Preferably is provided that the data processing unit of the several Cameras combined image data combined and evaluated to manipulations to recognize on one or more of the cameras. Also can by combination and evaluation of the image data manipulations in the Detection range of one or more of the cameras are detected. In particular, the data processing unit can combine the image data and Evaluate to detect deviations that affect the image content, the Image construction and / or image quality, in particular the Image illumination and / or brightness affect.

Diese und weitere besonders vorteilhafte Ausgestaltungen ergeben sich auch aus den Unteransprüchen.These and further particularly advantageous embodiments arise also from the dependent claims.

Demnach können zumindest einzelne der Kameras in einem das Bedienfeld umgebenden Gehäuseabschnitt des Selbstbedienungsterminals montiert sein, insbesondere in demjenigen Gehäuseabschnitt des Selbstbedienungsterminals installiert sein, der das Bedienfeld seitlich oder nach Oben begrenzt. Dabei kann auch eine einzelne der Kameras zumindest zwei der im Bedienfeld vorgesehenen Elemente erfassen, insbesondere zwei Bedienelemente, wie z. B. ein Geldausgabefach und eine Tastatur, erfassen. Eine andere Kamera wiederum kann in einem der im Bedienfeld vorgesehenen Elemente integriert sein, insbesondere in einem Karteneingabetrichter integriert sein.Accordingly, at least some of the cameras may be mounted in a housing section of the self-service terminal surrounding the control panel, in particular being installed in that housing section of the self-service terminal which delimits the control panel laterally or upwardly. In this case, a single of the cameras at least two provided in the control panel Ele capture elements, in particular two controls, such. As a cash box and a keyboard capture. In turn, another camera may be integrated in one of the elements provided in the control panel, in particular integrated in a card input hopper.

Auch kann vorgesehen sein, dass an dem Selbstbedienungsterminal eine zusätzliche Kamera für einen Bereich vorgesehen ist, an dem ein Benutzer, insbesondere sein Kopf, sich während der Bedienung des Selbstbedienungsterminals befindet. Somit kann im Bedarfsfall auch ein Portrait des Nutzers aufgenommen werden.Also can be provided that at the self-service terminal a additional camera for one area is where a user, especially his head, moves during operating the self-service terminal. Thus, can If necessary, a portrait of the user will be included.

Die Datenverarbeitungseinheit kann in das Selbstbedienungsterminal integriert sein. Bevorzugt weist die Datenverarbeitungseinheit eine die Bilddaten empfangende erste Stufe zur Bildverarbeitung, insbesondere zur Schattenentfernung, Kantendetektion, Vektorisierung und/oder Segmentierung, auf. Außerdem kann die Datenverarbeitungseinheit noch eine der ersten Stufe nachgeschaltete zweite Stufe zur Merkmalsextraktion, insbesondere mittels Blobanalyse, Kantenposition und/oder Farbverteilung, aufweisen. Zudem kann die Datenverarbeitungseinheit noch eine der zweiten Stufe nachgeschaltete dritte Stufe zur Klassifikation aufweisen.The Data processing unit can be integrated into the self-service terminal be. The data processing unit preferably has the image data receiving first stage for image processing, especially for shadow removal, Edge detection, vectorization and / or segmentation on. Furthermore the data processing unit can still be connected downstream of the first stage second stage for feature extraction, in particular by blob analysis, Edge position and / or color distribution, have. In addition, the Data processing unit still a second stage downstream third stage for classification.

Auch kann die Datenverarbeitungseinheit Schnittstellen für Videoüberwachungssysteme bzw. -einheiten (sog. CCTV) und/oder für Sicherheitssysteme aufweisen.Also The data processing unit can provide interfaces for video surveillance systems units (so-called CCTV) and / or security systems exhibit.

Bevorzugt ist vorgesehen, dass die Datenverarbeitungseinheit, wenn sie mittels der Verarbeitung der Bilddaten einen Manipulationsversuch an einem der Elemente erkennt und/oder eine Manipulation an einer der mehreren Kameras erkennt, einen Alarm auslöst, das Selbstbedienungsterminal sperrt und/oder die zusätzliche Kamera auslöst. Auch kann vorgesehen sein, dass die Kameras und/oder die Datenverarbeitungseinheit während der Bedienung und/oder Wartung des Selbstbedienungsterminals deaktiviert sind bzw. ist.Prefers is provided that the data processing unit when using the processing of image data a manipulation attempt on a recognizes the elements and / or a manipulation of one of the several Detects cameras, triggers an alarm, the self-service terminal locks and / or triggers the additional camera. It can also be provided that the cameras and / or the data processing unit disabled during operation and / or maintenance of the self-service terminal are or is.

Die Erfindung und die sich daraus ergebenen Vorteile werden nachfolgend anhand von Ausführungsbeispielen und unter Bezugnahme auf die beiliegenden schematischen Zeichnungen beschrieben, die folgendes darstellen:The The invention and the resulting advantages will be below based on embodiments and with reference to described the accompanying schematic drawings, the following represent:

1 zeigt eine perspektivische Ansicht auf das Bedienfeld eines Selbstbedienungsterminals mit einer Kamera-Anordnung; 1 shows a perspective view of the control panel of a self-service terminal with a camera assembly;

2 gibt den Erfassungsbereich derjenigen Kamera aus 1 wieder, die das Bedienfeld von der Seite erfasst; 2 outputs the detection range of that camera 1 again, which captures the control panel from the side;

3 gibt den Erfassungsbereich derjenigen Kamera aus 1 wieder, die das Bedienfeld von Oben erfasst; und 3 outputs the detection range of that camera 1 again, which captures the control panel from above; and

4a zeigt die Einbaussituation derjenigen Kamera, die in den Karteneingabetrichter integriert ist; 4a shows the installation situation of the camera integrated in the card slot;

4a gibt den Erfassungsbereich dieser Kamera aus 4a wieder; und 4a outputs the detection range of this camera 4a again; and

5 zeigt ein Blockschaltbild für eine mit mehreren der Kameras verbundener Datenverarbeitungseinheit und damit verbundener Videoüberwachungs-Einheit. 5 shows a block diagram for a connected to a plurality of cameras data processing unit and associated video surveillance unit.

Die 1 zeigt in eine perspektivische Ansicht den prinzipiellen Aufbau eines Selbstbedienungsterminals in Gestalt eines Geldautomaten ATM. Zu dem Bedienfeld Geldautomaten ATM gehören insbesondere ein Geldausgabefach 1, auch Shutter genannt, sowie eine Tastatur 2, d. h. Bedienelemente, an denen bevorzugt Manipulationsversuche, z. B. in Form von Überbauten, zwecks Skimming auftreten können. Der Geldautomaten ATM ist mit einer erfindungsgemäßen Kamera-Anordnung zum Erkennen solcher und ähnlicher Manipulationsversuchen ausgestattet.The 1 shows in a perspective view of the basic structure of a self-service terminal in the form of an ATM ATM. The ATM ATM control panel includes, in particular, a cashbox 1 , also called shutter, as well as a keyboard 2 , ie controls on which preferably manipulation attempts, eg. B. in the form of superstructures, for the purpose of skimming can occur. The ATM ATM is equipped with a camera arrangement according to the invention for detecting such and similar manipulation attempts.

Die Kamera-Anordnung umfasst mehrere und an verschiedenen Stellen montierte Kameras, nämlich eine seitliche Kamera CAMS, eine Draufsicht-Kamera CAMD, eine (in 4a dargestellte) Kamera CAMK, die in den Karteneingabetrichter integriert ist, und eine zusätzliche Portrait-Kamera CAMO.The camera arrangement comprises a plurality of cameras mounted at different locations, namely a lateral camera CAMS, a top view camera CAMD, a (in 4a shown) camera CAMK, which is integrated in the card slot, and an additional portrait camera CAMO.

Zumindest zwei der Kameras CAMS und CAMD (und ebenfalls CAMK) befinden sich im Nahbereich des Bedienfeldes, d. h. innerhalb einer Abgrenzung, Umrahmung oder dergleichen und sind dort montiert. Jede dieser Kameras, hier in 1 beispielsweise die Kamera CAMS oder CAMD, erfasst jeweils zumindest eines der im Bedienfeld des Geldautomaten angeordneten Elemente, also z. B. das Geldausgabefach 1 (Shutter) und/oder die Tastatur 2. Die seitliche Kamera CAMS erfasst vorzugsweise genau diese beiden Elemente 1 und 2; die Draufsicht-Kamera CAMD erfasst darüber hinaus noch weitere Elemente (siehe 3). Außerdem ist noch die in dem Karteneingabetrichter 4 integrierte Kamera CAMK vorgesehen (s. 4a), welche ausschließlich den Bereich des Kartenausgabetrichters erfasst. Alle diese Kameras befinden sich somit im Nahbereich des Bedienfeldes und sind auf einzelne oder mehrere Elemente ausgrichtet.At least two of the cameras CAMS and CAMD (and also CAMK) are in the vicinity of the control panel, ie within a boundary, frame or the like and are mounted there. Each of these cameras, here in 1 For example, the camera CAMS or CAMD, detects at least one of the arranged in the control panel of the ATM elements, ie, for. B. the cash dispenser 1 (Shutter) and / or the keyboard 2 , The lateral camera CAMS preferably captures exactly these two elements 1 and 2 ; the top view camera CAMD also detects other elements (see 3 ). There is also the one in the card entry funnel 4 integrated camera CAMK provided (s. 4a ), which exclusively covers the area of the card dispenser. All these cameras are therefore located in the vicinity of the control panel and are equipped with single or multiple elements.

Die zusätzliche Kamera CAMO hingegen befindet sich im oberen Gehäuseteil des Geldautomaten ATM und ist auf den Bereich gerichtet, in dem sich der Nutzer beim Bedienen des Geldautomaten befindet. Insbesondere erfasst diese Kamera CAMO den Kopf bzw. das Gesicht des Nutzers und wird deshalb hier auch als Portraitkamera bezeichnet.The additional camera CAMO, however, is located in the upper housing part of the ATM ATM and is directed to the area in which the user is located while operating the ATM. In particular, this camera captures CAMO the head or the face of the user and is therefore referred to here as a portrait camera.

Die 2 zeigt den Erfassungsbereich der Kamera CAMS, welche sich in einem seitlichen Gehäuseteil befindet, der das Bedienfeld des Geldautomaten ATM umrahmt bzw. einfasst. Im Blickwinkel dieser seitlichen Kamera CAMS befinden sich insbesondere das Geldausgabefach 1 und die Tastatur 2. Insbesondere die Kamera CAMS ist mit einem Weitwinkelobjektiv ausgestattet, um zumindest diese beiden Elemente bzw. Teilbereiche des Bedienfeldes zu erfassen. Der Geldautomat ATM ist dabei so beschaffen, dass die genannten Elemente 1 und 2 vorzugsweise möglichst homogene Flächen mit diese abgrenzenden Kanten aufweisen. Dadurch wird eine Objekterkennung vereinfacht. Durch Anbringung der Kamera CAMS an dieser besonders geeigneten Position können die genannten Teilbereiche bzw. Elemente 1 und 2 sehr zuverlässig optische vermessen werden. Es kann vorgesehen werden, dass die Kamera insbesondere auf bestimmte Bereiche scharf eingestellt ist.The 2 shows the detection range of the camera CAMS, which is located in a side housing part, which framing the control panel of the ATM ATM or surrounds. In the viewpoint of this lateral camera CAMS are in particular the cash dispenser 1 and the keyboard 2 , In particular, the camera CAMS is equipped with a wide-angle lens in order to capture at least these two elements or partial areas of the control panel. The ATM ATM is designed so that the elements mentioned 1 and 2 Preferably have as homogeneous as possible surfaces with these delimiting edges. This simplifies object recognition. By attaching the camera CAMS at this particularly suitable position, the mentioned subregions or elements 1 and 2 very reliable optical measurement. It can be provided that the camera is focused in particular on certain areas.

Ein anderer Blickwinkel, nämlich der der Draufsicht-Kamera CAMD, wird anhand der 3 verdeutlicht. Hier wird das Erfassungsfeld dieser Kamera CAMD veranschaulicht, die im oberen Bereich des Geldautomatens ATM installiert ist (s. auch 1) und die das Bedienfeld von oben erfasst. Neben dem Geldausgabefach 1 und der Tastatur 2 können in dem Erfassungsbereich der Kamera auch noch weitere Elemente vorgesehen sein, wie z. B. eine Ablagefläche in Nähe der Tastatur, ein Karteneingabetrichter 4, d. h. das Zuführungsteil für den Kartenleser, sowie z. B. ein Bildschirm 5 bzw. Display. Auch diese weiteren genannten Elemente 3, 4 und 5 stellen potentielle Ziele für Manipulationsversuche dar.Another perspective, namely that of the top view camera CAMD, is based on the 3 clarified. Here, the detection field of this camera CAMD is illustrated, which is installed in the upper part of the ATM ATM (see also 1 ) and which captures the control panel from above. Next to the cash dispenser 1 and the keyboard 2 can be provided in the detection range of the camera even more elements such. B. a shelf near the keyboard, a card entry funnel 4 , ie the supply part for the card reader, and z. B. a screen 5 or display. Also these other mentioned elements 3 . 4 and 5 represent potential targets for manipulation attempts.

Für den Karteneingabetrichter 4 selbst ist die darin integrierte Kamera CAMK vorgesehen. Die Einbausituation ist in der 4a dargestellt. Um für diese Kamera CAMK eine gute Bildausleuchtung zu erreichen, kann die ohnehin eingesetzte Beleuchtung des Kartenschlitzes genutzt werden. Die 4b veranschaulicht den Erfassungsbereich der Kamera CAMK, und zeigt deutlich, dass dieser sich im wesentlichen in drei Teilbereiche I, II und III unterteilen lässt.For the card entry funnel 4 itself, the integrated CAMK camera is provided. The installation situation is in the 4a shown. In order to achieve good image illumination for this camera CAMK, the already used illumination of the card slot can be used. The 4b illustrates the detection range of the camera CAMK, and clearly shows that it can be subdivided into essentially three subregions I, II and III.

Zumindest die im Nahbereich des Bedienfeldes montierten Kameras CAMS; CAMD und CAMK sind mit einer speziellen Datenverarbeitungseinheit 10 verbunden (siehe 5), um durch Kombination von Bilddaten das Erkennen von Manipulationen deutlich zu verbessern. Diese noch später beschriebene Datenverarbeitungseinheit ermöglicht es, die von der Kamera erzeugten Bilddaten optimal auszuwerten, um somit mit hoher Sicherheit einen Manipulationsversuch, wie z. B. einen Überbau der Tastatur 2 oder eine Manipulation an einer der Kameras, sofort zu erkennen und gegebenenfalls Alarme und Deaktivierungen auszulösen. Mittels der noch später eingehender beschriebenen Datenverarbeitungseinheit sind unter anderem folgende Manipulationen sicher zu erkennen:

– Anbringen eines Tastaturüberbaus
– Anbringen eines Komplettüberbaus an der unteren Auflagefläche
– Anbringen eines Überbaus an dem Geldausgabefach (Shutter) und/oder das Anbringen von Gegenständen zur Aufnahme von Sicherheitsinformationen, insbesondere PIN-Nr., wie z. B. Minikameras, Kamerahandys und ähnliche Spähkameras.

At least the cameras CAMS mounted in the vicinity of the control panel; CAMD and CAMK are equipped with a special data processing unit 10 connected (see 5 ) in order to significantly improve the recognition of manipulations by combining image data. This data processing unit described later makes it possible to optimally evaluate the image data generated by the camera, in order to thus with high security a manipulation attempt, such. B. a superstructure of the keyboard 2 or a manipulation on one of the cameras to detect immediately and, if necessary, trigger alarms and deactivations. By means of the data processing unit described in more detail later, the following manipulations can be reliably detected, among others:

- Attaching a keyboard superstructure
- Attaching a complete superstructure to the lower support surface
- Attaching a superstructure to the cash box (shutter) and / or attaching objects for receiving security information, in particular PIN no., Such. As miniature cameras, camera phones and similar Spähkameras.

Für das Erkennen von Überbauten wird innerhalb der Datenverarbeitungseinheit 10 mit Hilfe der Kameras CAMS und CAMD eine optische Vermessung der erfassten Elemente, wie z. B. der Tastatur 2, durchgeführt, um somit Abweichungen im Manipulationsfall klar erkennen zu können. Versuche der Anmelderin haben gezeigt, dass bereits Referenzabweichungen im Millimeterbereich klar erkannt werden können. Für eine Erkennung von Fremdobjekten (Spähkamera) kann beispielsweise eine Kombination aus Kantendetektion und Segmentierung verwendet werden, um somit die Konturen von fremden Gegenständen im Bedienfeld (z. B. Minikameras) klar erkennen zu können. Die dazu erforderliche Bilddatenverarbeitung erfolgt überwiegend in der nachfolgend beschriebenen Datenverarbeitungseinheit.For the detection of superstructures is within the data processing unit 10 with the help of the cameras CAMS and CAMD an optical measurement of the detected elements, such. As the keyboard 2 , in order to be able to clearly recognize deviations in the case of manipulation. Tests by the applicant have shown that even reference deviations in the millimeter range can be clearly recognized. For example, a combination of edge detection and segmentation can be used for detection of foreign objects (scouting camera) in order to be able to clearly recognize the contours of foreign objects in the control panel (eg miniature cameras). The required image data processing takes place predominantly in the data processing unit described below.

Die 5 zeigt das Blockschaltbild einer erfindungsgemäßen Datenverarbeitungseinheit 10, an welche die Kameras CAMS, CAMD und CAMK angeschlossen sind, sowie einer Videoüberwachungs- bzw. CCTV-Einheit 20, die mit der Datenverarbeitungseinheit 10 verbunden ist. Die Datenverarbeitungseinheit 10 weist insbesondere folgende Stufen bzw. Module auf:
Eine erste Stufe 11 zur Bildverarbeitung, eine zweite Stufe 12 zur Merkmalsextraktion und eine dritte Stufe 13 zur Klassifikation der verarbeiteten Daten. Die Stufe 13 wiederum ist mit einer Schnittstelle 14 verbunden, über die verschiedene Alarm- oder Überwachungsvorrichtungen aktiviert bzw. angesprochen werden können. Diese, im weiteren auch RISS genannten, Vorrichtungen umfassen unter anderem eine Bildfälschungs- bzw. Manipulationserkennung (IFD). Die erste Stufe 11 wiederum, welche zur Bildverarbeitung dient, ist auch mit einer zweiten Schnittstelle 15 verbunden, über die eine Verbindung zu der CCTV-Einheit 20 hergestellt wird. Mit Hilfe dieser CCTV-Einheit kann beispielsweise eine Fernüberwachung bzw. Ferndiagnose ausgeführt werden.The 5 shows the block diagram of a data processing unit according to the invention 10 to which the cameras CAMS, CAMD and CAMK are connected, as well as a video surveillance or CCTV unit 20 connected to the data processing unit 10 connected is. The data processing unit 10 has in particular the following stages or modules:
A first step 11 for image processing, a second stage 12 for feature extraction and a third stage 13 for the classification of the processed data. The stage 13 in turn is with an interface 14 connected via the various alarm or monitoring devices can be activated or addressed. These devices, which are also referred to as RISS in the following, include, among others, a picture counterfeit or manipulation detection (IFD). The first stage 11 again, which serves for image processing, is also with a second interface 15 connected via the connect to the CCTV unit 20 will be produced. With the help of this CCTV unit, for example, a remote monitoring or remote diagnosis can be performed.

Für die Verarbeitung der von den Kameras CAMS, CAMD und CAMK erzeugten Bilddaten D ist zunächst die Datenverarbeitungseinheit 10 zuständig. Die Bilddaten D gelangen zunächst an die erste Stufe 11, die eine Vorverarbeitung der ankommenden Bilddaten durchführt, wobei hier insbesondere Maßnahmen wie Schattenentfernung, Kantendetektion, Vektorisierung und/oder Segmentierung durchgeführt werden. Die nachgeschaltete zweite Stufe 12 dient der Merkmalsextraktion, die beispielsweise mittels einer sogenannten Blobanalyse, einer Kantenpositionierung und/oder einer Farbverteilung durchgeführt werden kann. Beispielsweise dient die Blob-Analyse zur Erkennung von zusammenhängenden Regionen in einem Bild und zur Ausführung von Messungen an den Blobs. Ein Blob (Binary Large Object) ist ein Bereich angrenzender Bildpunkte mit demselben logischen Zustand. Alle Bildpunkte in einem Bild, die zu einem Blob gehören, sind im Vordergrund. Alle übrigen Bildpunkte sind im Hintergrund. In einem binären Bild haben Bildpunkte im Hintergrund Werte, die Null entsprechen, während jeder Bildpunkt ungleich Null Teil eines binären Objekts ist.For the processing of the image data D generated by the cameras CAMS, CAMD and CAMK, the data processing unit is first 10 responsible. The image data D first arrive at the first stage 11 , which performs a preprocessing of the incoming image data, wherein in particular measures such as shadow removal, edge detection, vectorization and / or segmentation are performed. The downstream second stage 12 serves the feature extraction, which can be performed for example by means of a so-called Blobanalyse, an edge positioning and / or a color distribution. For example, blob analysis is used to detect contiguous regions in an image and to make measurements on the blobs. A Blob (Binary Large Object) is an area of adjacent pixels with the same logical state. All the pixels in a picture belonging to a blob are in the foreground. All other pixels are in the background. In a binary image, pixels in the background have values that correspond to zero, while every pixel other than zero is part of a binary object.

Anschließend erfolgt in der Stufe 13 eine Klassifikation, welche auf der Grundlage der extrahierten Merkmale bestimmt, ob eine feindliche Manipulation an dem Selbstbedienungsterminal bzw. Geldautomaten ATM aufgetreten ist oder nicht.Subsequently, in the stage 13 a classification which determines whether or not hostile manipulation has occurred at the self-service terminal ATM based on the extracted features.

Die Datenverarbeitungseinheit 10 kann beispielsweise mittels eines Personalcomputers realisiert werden, der mit dem Geldautomaten ATM verbunden ist oder der darin integriert ist. Neben den Kameras CAMS, CAMD und CAMK, welche die genannten Teilbereiche des Bedienfeldes CP erfassen, kann auch die zusätzliche Kamera CAMO am Geldautomaten ATM montiert sein (s. 1), welche auf den Benutzer bzw. Kunden gerichtet ist und insbesondere sein Gesicht erfasst. Diese zusätzliche, auch als Portraitkamera bezeichnete, Kamera CAMO kann beim Erkennen eines Manipulationsangriffes ausgelöst werden, um ein Bild von der sich am Geldautomaten befindenden Person zu machen. Sobald ein Skimming-Angriff erkannt wird, kann das beschriebene System beispielsweise folgende Aktionen durchführen:

– Abspeichern eines Fotos des Angreifers, wobei sowohl einzelne der Kameras CAMS, CAMD und/oder CAMK wie auch die zusätzliche Portraitkamera CAMO aktiviert werden können
– Alarmieren der laufenden Geldautomatenapplikation und/oder eines zentralen Managementservers und/oder einer Person, z. B. über E-Mail
– Einleitung von Gegenmaßnahmen, die z. B. das Sperren bzw. Herunterfahren des Geldautomaten
– Übermittlung von Daten, insbesondere von Bildern, der erkannten Manipulation, beispielsweise über das Internet über eine Zentrale

The data processing unit 10 can for example be realized by means of a personal computer which is connected to the ATM ATM or which is integrated therein. In addition to the cameras CAMS, CAMD and CAMK, which detect the said subregions of the control panel CP, the additional camera CAMO can be mounted on the ATM ATM (s. 1 ), which is directed to the user or customer and in particular captures his face. This additional, also known as a portrait camera, camera CAMO can be triggered upon detection of a tampering attack to make a picture of the person located at the ATM. For example, once a skimming attack is detected, the described system can perform the following actions:

- Storing a photo of the attacker, whereby both individual CAMS, CAMD and / or CAMK cameras as well as the additional portrait camera CAMO can be activated
Alarming the current ATM application and / or a central management server and / or a person, e.g. Eg via e-mail
- initiation of countermeasures, such as B. the locking or shutdown of the ATM
- Transmission of data, in particular images, the detected manipulation, for example via the Internet via a central office

Den Umfang und die Art der getroffenen Aktionen bzw. Gegenmaßnahmen kann der Betreiber des Geldautomaten über das hier beschriebene System konfigurieren.The Scope and type of actions taken or countermeasures the operator of the ATM can use the one described here Configure the system.

Wie oben beschrieben, können direkt am Bedienfeld mehrere installierte Kameras vorgesehen sein, wobei die Kameras CAMS und CAMD das Bedienfeld von Außen erfassen und die Kamera CAMK z. B. den Karteneingabetrichter von Innen erfasst. Außerdem kann eine zusätzliche Portrait-Kamera installiert sein (s. CAMO in 1). Für die eigentliche Manipulationserkennung werden die Kameras CAMS und CAMD am Bedienfeld und die Kamera CAMK in der Karteneingabe benutzt. Zum Zwecke der Dokumentation eines Manipulationsversuches wird auch die Portraitkamera CAMO benutzt.As described above, several cameras can be provided directly on the control panel, the cameras CAMS and CAMD capture the control panel from the outside and the camera CAMK z. B. the card entry funnel detected from the inside. In addition, an additional portrait camera can be installed (see CAMO in 1 ). For the actual manipulation detection the cameras CAMS and CAMD are used on the control panel and the camera CAMK in the card input. For the purpose of documenting a manipulation attempt, the portrait camera CAMO is also used.

Vorzugsweise haben alle Kameras eine Auflösung von mindestens 2 Megapixeln. Die benutzten Objektive weisen einen Blickwinkel von etwa 140 Grad und mehr auf. Außerdem ist die Belichtungszeit der eingesetzten Kameras in einem weiten Bereich von beispielsweise 0,25 msec bis zu 8.000 msec (8 s) frei einstellbar. Dadurch wird die Anpassung an die unterschiedlichsten Beleuchtungsbedingungen ermöglicht. Versuche der Anmelderin haben ergeben, dass eine Kameraauflösung von etwa 10 Pixeln pro Grad erreichbar ist.Preferably All cameras have a resolution of at least 2 megapixels. The lenses used have a viewing angle of about 140 degrees and more. In addition, the exposure time of the used Cameras in a wide range, for example, 0.25 msec to freely adjustable to 8,000 msec (8 s). This will make the adjustment allows for a variety of lighting conditions. Applicant's experiments have shown that a camera resolution of about 10 pixels per degree is achievable.

Bezogen auf einen Abstand von einem Meter kann somit eine Genauigkeit von 1,5 mm pro Pixel erreicht werden. Das wiederum bedeutet, dass eine Manipulation ab einer Referenzabweichung von bereits 2 bis 3 mm sicher erkannt werden kann. Je näher das Objektiv der Kamera an dem erfassten Element bzw. betrachteten Objekt ist, desto genauer kann die Messung erfolgen. Demnach kann in näheren Bereichen sogar eine Genauigkeit von weniger als 1 mm erreicht werden.Based At a distance of one meter can thus an accuracy of 1.5 mm per pixel can be achieved. That in turn means a manipulation safely detected from a reference deviation of already 2 to 3 mm can be. The closer the lens of the camera to the captured Element or object considered, the more accurate the measurement respectively. Thus, in nearer areas even one Accuracy of less than 1 mm can be achieved.

Je nach Einsatzbereich des Geldautomatens, z. B. im Außenbereich oder im Innenbereich, sowie der gegebenen Lichtverhältnisse, kann es vorteilhaft sein, die Kamera CAMS eher im seitlichen Gehäuseteil des Geldautomatens ATM oder im oberen Gehäusebereich zu montieren. Auch ergeben sich je nach Kameraposition verschiedene Überwachungsmöglichkeiten. Bei der Überwachung der verschiedenen Elemente bzw. Teilbereiche wird insbesondere folgendes erreicht:
Das Erfassen des Geldausgabefachs (Shutter) 1 ermöglicht das Überprüfen von Manipulationen in Form sogenannter Cash-Trapper, d. h. spezieller Überbauten. Das Erfassen des Tastaturfeldes ermöglicht es, dort Manipulationsversuche durch Überbauten oder Veränderungen an Lichtschutzmaßnahmen und dergleichen festzustellen. Das Erfassen der Auflagefläche ermöglicht es insbesondere, Komplettüberbauen zu erkennen. Das Erfassen des Karteneingabetrichters 4, insbesondere durch eine darin integrierte Kamera, ermöglicht es, dortige Manipulationen zu erkennen.Depending on the application of the ATM, z. As outdoors or indoors, as well as the given lighting conditions, it may be advantageous to mount the camera CAMs rather in the side housing part of the ATM ATM or in the upper housing area. Also arise depending on the camera position different monitoring options. When monitoring the various elements or subareas, the following is achieved in particular:
Capturing the cash dispenser (shutter) 1 allows the checking of manipulations in the form of so-called cash trappers, ie special superstructures. The detection of the keypad makes it possible to determine there manipulation attempts by superstructures or changes to light protection measures and the like. The detection of the support surface makes it possible in particular to detect complete overbuilding. Capturing the card entry pit ters 4 , Especially by a camera integrated therein, makes it possible to detect local manipulation.

Es hat sich gezeigt, dass insbesondere an dem Tastaturfeld und an dem Karteneingabetrichter bereits Abweichungen von 2 mm klar erkannt werden können. Abweichungen an der hinteren Außenkante der Auflagefläche können bereits ab 4 mm erkannt werden. Abweichungen an der unteren Kante des Shutters können bereits ab 8 mm erkannt werden.It has been shown that especially on the keypad and on the Card entry funnel already detected deviations of 2 mm clearly can be. Deviations on the rear outer edge of the Support surface can already be detected from 4 mm. Deviations on the lower edge of the shutter can already be recognized from 8 mm.

Zum Erkennen von Manipulationen führt die Datenverarbeitungseinheit 10 (siehe 4) insbesondere einen Vergleich der aufgenommenen Bilddaten D mit Referenzdaten durch. Dabei kann insbesondere ein Bild des Außenbereiches auf seine Homogenität hin untersucht und mit dem Bild des Außenbereiches der Bedienfeldkamera abgeglichen werden. Es werden auch die Bilddaten der verschiedenen Kameras CAMS, CAMD und/oder CAMK miteinander verglichen, um z. B. festzustellen, ob an einzelnen der Kameras manipuliert wurde. Wenn beispielsweise die Kamera CAMD abgedeckt wurde, ergibt sich eine Diskrepanz zu den Bildaufnahmen der anderen Kameras. Insbesondere kann anhand der Bildhelligkeiten sehr schnell festgestellt, ob eine Verdunklung nur an einer einzelnen Kamera auftritt, so dass eine Manipulation bzw. Abdeckung dieser Kamera anzunehmen ist. Die Kombination und Auswertung von mehreren Kamerasignalen bzw. Bilddaten erhöht die Robustheit der Manipulationsüberwachung und die Vermeidung von Fehlalarmen. Unter anderem können die Bilddaten bzw. -informationen auch wie folgt genutzt werden:

– Unterscheidung von künstlicher und natürlicher Verdunklung: Wird eine Kamera abgedeckt, so steht ihr aufgenommenes Bild im Widerspruch zu den Bildern der anderen Kameras. Fällt das natürliche Licht (Tageslicht) oder das künstliche Licht (Raumbeleuchtung) aus, so ist der Effekt an allen Kameras gleich oder zumindest ähnlich. Andernfalls erkennt das System einen Manipulationsversuch.
– Erkennung von Täuschungsangriffen auf die Kamera-Anordnung, z. B. durch vorgeklebte Fotos: Zeigt eine einzelne Kamera ein anderes Bild (Helligkeit, Bewegung, Farben, insbesondere bezüglich des Außenbereichs), so deutet dies auf einen Täuschungsversuch hin.

The data processing unit leads to the detection of manipulations 10 (please refer 4 ) in particular a comparison of the recorded image data D with reference data. In this case, in particular, an image of the outside area can be examined for its homogeneity and compared with the image of the outside area of the control panel camera. The image data of the different cameras CAMS, CAMD and / or CAMK are also compared with one another in order, for. B. to determine if any of the cameras has been manipulated. If, for example, the CAMD camera has been covered, the result is a discrepancy with the images of the other cameras. In particular, it can be determined very quickly on the basis of the image brightness whether a darkening occurs only on a single camera, so that a manipulation or cover of this camera is to be assumed. The combination and evaluation of several camera signals or image data increases the robustness of the manipulation monitoring and the avoidance of false alarms. Among other things, the image data or information can also be used as follows:

- Distinction between artificial and natural obscuration: If a camera is covered, its recorded image is in contradiction to the images of the other cameras. If the natural light (daylight) or the artificial light (room lighting) fails, the effect is the same or at least similar on all cameras. Otherwise, the system detects a tampering attempt.
- Detection of deception attacks on the camera arrangement, z. For example, by pre-glued photos: If a single camera shows a different image (brightness, movement, colors, especially in the outdoor area), this indicates an attempt to deceive.

Erhöhung der Robustheit, insbesondere bei Abdeckung des Karteneinschubtrichters: Wird dieser verdeckt, so zeigt die darin integrierte Kamera (s. CAMK in 4a) ein anderes Bild an (insbesondere bezüglich des Außenbereiches) als die übrigen Kameras (s. CAMS, CAMD in 1).Increased robustness, especially when the card slot is covered: If it is hidden, the integrated camera (see CAMK in 4a ) displays another image (especially with respect to the outside area) than the other cameras (see CAMS, CAMD in 1 ).

Weiterhin kann z. B. auch die Umgebung auf eine Abstrahlung der Beleuchtung für den Karteneingabetricher 4 untersucht werden. Die Anbindung des Systems an das Internet über die Schnittstelle 23 ermöglicht es, auch per Fernzugriff die Kamera bzw. die verschiedenen Kameras anzusteuern. Die gewonnenen Bilddaten können auch über den Internetanschluß an einen Video-Server übermittelt werden. Somit agiert die jeweilige Kamera quasi als virtuelle IP-Kamera. Die oben beschriebene CCTV-Einheit 20 dient insbesondere einer solchen Video-Überwachungsmöglichkeit, wobei die Schnittstelle 15 zur CCTV-Einheit für folegende Funktionen ausgelegt ist:
Abfrage eines Bildes, Einstellen der Bildrate, des Farbmodells, der Bildauflösung, Auslösen eines Ereignisses im CCTV-Dienst bei Bereitstellung eines neuen Bildes und/oder eventuell eine visuelle Hervorhebung von erkannten Manipulationen auf einem bereitgestellten Bild.Furthermore, z. As well as the environment on a radiation of the illumination for the card input tray 4 to be examined. The connection of the system to the Internet via the interface 23 makes it possible to remotely control the camera or the various cameras. The acquired image data can also be transmitted via the Internet connection to a video server. Thus, the respective camera virtually acts as a virtual IP camera. The CCTV unit described above 20 serves in particular such a video monitoring option, the interface 15 to the CCTV unit is designed for the following functions:
Query an image, adjust frame rate, color model, image resolution, trigger an event in the CCTV service when a new image is provided, and / or possibly visually highlight detected manipulations on a rendered image.

Das System ist so ausgelegt, dass im normalen Betrieb (z. B. Geldabheben, Kontostandsabfrage usw.) keine Fehlalarme durch Hände und/oder Gegenstände im Bild erzeugt werden. Deshalb wird die Manipulationserkennung im Zeitraum einer normalen Automatenbenutzung deaktiviert. Auch soll in Zeitbereichen, in denen beispielsweise eine Reinigung oder eine kurzfristige anderweitige Benutzung (Ablage von Kontoauszügen, Interaktionen vor und nach dem Start einer Transaktion) nicht zur Manipulationserkennung herangezogen werden. Im wesentlichen werden somit vorzugsweise nur starre und unbewegliche Manipulationsversuche analysiert und erkannt. Das System ist so ausgelegt, dass eine Überwachung auch bei unterschiedlichsten Lichtverhältnissen (Tag, Nacht, Regen, Bewölkung, usw.) funktioniert. Ebenfalls werden sich kurzzeitig verändernde Lichtverhältnisse, wie z. B. Lichtspiegelungen, Schattenverläufe und dergleichen, bei der Bildverarbeitung kompensiert bzw. ignoriert, um einen Fehlalarm zu vermeiden. Zudem können technisch auftretende Ereignisse, wie etwa das Ausfallen einer Beleuchtung und dergleichen, berücksichtigt werden. Diese und weitere Sonderfälle werden insbesondere durch die dritte Stufe zur Klassifikation erkannt und gelöst.The System is designed so that during normal operation (eg withdrawing money, Account balance query, etc.) no false alarms by hands and / or Objects are generated in the image. Therefore, the tamper detection deactivated in the period of a normal machine use. Also should in time ranges, in which, for example, a cleaning or a short-term other use (storage of account statements, Interactions before and after the start of a transaction) Tampering be used. In essence thus preferably only rigid and immovable manipulation attempts analyzed and recognized. The system is designed to provide monitoring even in different light conditions (day, night, Rain, cloud cover, etc.) works. Also will be briefly changing light conditions, such as B. light reflections, shadows and the like, in the image processing compensated or ignored to a false alarm to avoid. In addition, technically occurring events, such as the failure of a lighting and the like, taken into account become. These and other special cases will be particular recognized and solved by the third stage for classification.

Das von dem beschriebenen System durchgeführte Verfahren zur Manipulationserkennung weist insbesondere folgenden Ablauf auf (s. auch 4):
Zunächst erfolgt in einem ersten Schritt eine Bildaufnahme (Stufe 11), wobei die Kameraparameter eingestellt werden, um geeignete Aufnahmen zu erzeugen. Dabei wird insbesondere eine Reihe von Bildern bzw. entsprechende Bilddaten D aufgenommen, welche dann als Grundlage bzw. Referenz für die Vorverarbeitung dienen.The method for manipulation detection performed by the described system has in particular the following sequence (see also FIG 4 ):
First, in a first step, an image acquisition (step 11 ), where the camera parameters are adjusted to produce suitable pictures. In particular, a series of images or corresponding image data D is recorded, which then serves as the basis or reference for the preprocessing.

Anschließend erfolgt eine Vorverarbeitung der Bilddaten D (Stufe 11), wobei diese so verarbeitet werden, dass sie sich möglichst gut für die Weiterverarbeitung eignen. Dazu werden beispielsweise mehrere Bilder zu einem Zielbild zusammengesetzt und mittels Bildverbesserungsalgorithmen optimiert. Insbesondere werden dabei folgende Schritte ausgeführt:
Schattenentfernung, Entfernung sich bewegender Objekte, Entfernung von Rauschen und/oder Zusammenfassung verschiedener belichteter Aufnahmen.Subsequently, preprocessing of the image data D (stage 11 ), which are processed so that they are as good as possible for further processing. For example, meh assembled images to a target image and optimized by means of image enhancement algorithms. In particular, the following steps are carried out:
Shadow removal, removal of moving objects, removal of noise and / or summary of various exposed shots.

Die Kameras werden u. a. auf unterschiedliche Belichtungszeiten eingestellt, um Reflektionen zu entfernen und um gut ausgeleuchtete Bereiche zu sammeln. Vorzugsweise werden die Bilder über einen vorbestimmten Zeitraum gesammelt, um möglichst gute Ausgangsbilder zur Manipulationserkennung zu gewinnen. In einem dritten Schritt wird eine Merkmalsextraktion durchgeführt (Stufe 12), bei der Bildanalyseverfahren auf die vorverarbeiteten Bilder bzw. Bilddaten ausgeführt werden, um diese auf bestimmte Merkmale hin zu überprüfen, wie z. B. auf Kantenpositionen oder Farbverteilungen. Für jedes Merkmal kann eine Zahl bzw. ein Wert vorgegeben werden, der angibt, wie gut das entsprechende Merkmal in dem betrachteten Bild wieder gefunden wurde. Die Werte werden in einem sogenannten Merkmalsvektor zusammengefasst.Among other things, the cameras are set to different exposure times to remove reflections and to collect well-lit areas. Preferably, the images are collected over a predetermined period of time to obtain the best possible output images for manipulation detection. In a third step, feature extraction is performed (step 12 ), in which image analysis methods are executed on the preprocessed images or image data in order to check them for certain features, such as B. on edge positions or color distributions. For each feature, a number or a value can be specified, which indicates how well the corresponding feature was found again in the viewed image. The values are summarized in a so-called feature vector.

In einem weiteren Schritt wird eine Klassifikation durchgeführt (Stufe 13), d. h. der Merkmalsvektor wird an einen Klassifikationsablauf übergeben, um eine Entscheidung zu treffen, ob eine Manipulation vorliegt oder nicht. Dabei werden auch solche Arten von Klassifikatoren benutzt, die Konfidenz, d. h. eine Wahrscheinlichkeit oder Sicherheit, angeben können, mit der die Entscheidung zutrifft. Verwendete Klassifikationsmechanismen können z. B. sein:
Learning Classify Systems, Bayes Klassfikatoren, Support Vector Machines (SVM) oder Entscheidungsbäume (CART bzw. C 4.5).In a further step, a classification is performed (step 13 ), ie, the feature vector is passed to a classification process to make a decision as to whether there is a manipulation or not. It also uses those types of classifiers that can indicate the confidence, ie probability or certainty, of the decision. Used classification mechanisms can, for. For example:
Learning Classify Systems, Bayes Classifiers, Support Vector Machines (SVM) or Decision Trees (CART or C 4.5).

Das hier beschriebene System wird vorzugsweise modular aufgebaut, um verschiedene Konfirgurationen zu ermöglichen. Die eigentliche Bildverarbeitung sowie die CCTV-Anbindung werden in verschiedenen Modulen realisiert (siehe 4).The system described herein is preferably modular in design to allow for different configurations. The actual image processing as well as the CCTV connection are realized in different modules (see 4 ).

Das hier vorgestellte System ist auch dazu geeignet, die erkannten Manipulationen zu dokumentieren bzw. digital zu archivieren. Im Falle einer erkannten Manipulation werden die aufgenommenen Bilder mit entsprechenden Meta-Informationen, wie z. B. Zeitstempel, Art der Manipulation usw., auf einer Festplatte im System bzw. in einem angeschlossenen PC abgespeichert. Auch können zwecks eines Reportings Meldungen an eine Plattform weitergeleitet werden, wie z. B. Fehlermeldungen, Statusmeldungen (Deaktivierung, Moduswechsel), Statistiken, Manipulationsverdacht und/oder Alarmmeldungen. Im Falle eines Alarms kann eine entsprechende Meldung mit der jeweiligen Alarmstufe an das Administrationsinterface bzw. die Schnittstelle weitergegeben werden. An dieser Schnittstelle werden außerdem noch folgende Möglichkeiten realisiert:
Abfrage von Kameradaten, wie z. B. Anzahl der Kameras, Bauzustand, Seriennummer, usw., Kamerastammdaten bzw. Einstellen von Kameraparametern und/oder Registrierung für Alarme (Notifikationen).The system presented here is also suitable for documenting the detected manipulations or digitally archiving them. In the case of a detected manipulation, the recorded images with appropriate meta-information, such. As timestamp, type of manipulation, etc., stored on a hard disk in the system or in a connected PC. Also, for reporting, messages may be forwarded to a platform, such as: As error messages, status messages (deactivation, mode change), statistics, suspected manipulation and / or alarms. In the event of an alarm, a corresponding message with the respective alarm level can be forwarded to the administration interface or the interface. The following options are also implemented at this interface:
Query of camera data, such as Number of cameras, construction status, serial number, etc., camera master data or setting of camera parameters and / or registration for alarms (notifications).

Die hier vorgestellte Erfindung ist insbesondere dazu geeignet, feindliche Manipulationen an einem Selbstbedienungsterminal, wie z. B. an einem Geldautomaten, zuverlässig zu erkennen. Hierzu wird das Bedienfeld durch mindestens eine Kamera kontinuierlich und automatisch überwacht. Mittels einer Bilddatenverarbeitung werden die von der Kamera erfassten Elemente optisch vermessen, um Abweichungen von Referenzdaten zu erkennen. Es hat sich gezeigt, dass bereits Abweichungen im Millimeterbereich sicher erkannt werden können. Für die Erkennung von Fremdobjekten wird vorzugsweise eine Kombination aus Kantendetektion und Segmentierung benutzt, so dass Konturen von zurückgelassenen Gegenständen klar erkannt und markiert werden können. Im Falle eines Manipulationsversuches können Gegenmaßnahmen bzw. Aktionen ausgelöst werden.The here presented invention is particularly suitable hostile Manipulations on a self-service terminal, such. At an ATM, reliable to recognize. For this, the control panel is through at least one camera continuously and automatically monitored. By means of an image data processing are captured by the camera Optically measure elements to allow for deviations from reference data detect. It has been shown that already deviations in the millimeter range can be reliably detected. For detection of foreign objects is preferably a combination of edge detection and segmentation used, leaving outlines of left behind Objects can be clearly recognized and marked. In the case of a manipulation attempt can countermeasures or actions are triggered.

Durch die hier vorgeschlagene Kombination mehrerer Kameras und der intelligenten Bilddatenverarbeitung erhöht die Erfindung deutlich die Zuverlässigkeit, mit der Manipulationen erkannt werden können.By the here proposed combination of several cameras and the intelligent Image data processing significantly increases the invention Reliability with which manipulations can be detected.

In einer bevorzugten Ausführungsform weist die Erfindung folgende Kamera-Anordnung auf:
Eine Kamera am Karteneingabetrichter, eine Kamera am Bedienfeld und eine Kamera im oberen Bereich des Geldautomaten zum Aufnehmen von Portraitfotos bzw. -videos. Außerdem sind die Kameras mit der beschriebenen Datenverarbeitungseinheit verbunden. Innerhalb der Datenverarbeitungseinheit werden die von den Kameras gewonnenen Bilddaten bzw. Informationen unter anderem wie folgt genutzt:
Erkennung bzw. Unterscheidung von künstlicher und natürlicher Verdunklung: Wird eine Kamera abgedeckt, so widerspricht sich ihr aufgenommenes Bild mit den Bildern aus den Kameras. Fällt natürliches oder künstliches Licht aus, so tritt dieser Effekt bei allen Kameras gleichermaßen auf. Erkennung von Täuschungsangriffen auf das Kamerasystem, z. B. durch vorgeklickte Fotos: Zeigt eine Kamera ein anderes Bild (unterschiedliche Helligkeit, Bewegung, Farben, usw.), so deutet dies auf einen Täuschungsversuch hin. Erhöhung der Robustheit der Abdeckungserkennung am Karteneingabetrichter: Wird der Karteneingabetrichter verdeckt, so zeigt die dort integrierte Kamera CAMK ein anderes Bild des Außenbereichs an, als dies die übrigen Kameras tun.In a preferred embodiment, the invention has the following camera arrangement:
A camera on the card slot, a camera on the control panel, and a camera on the top of the ATM for taking portraits or videos. In addition, the cameras are connected to the described data processing unit. Within the data processing unit, the image data or information obtained by the cameras is used, inter alia, as follows:
Recognition or distinction of artificial and natural obscuration: If a camera is covered, its captured image contradicts the images from the cameras. If natural or artificial light fails, this effect is equally noticeable on all cameras. Detection of deception attacks on the camera system, eg. For example, by clicking on photos: If a camera displays another image (different brightness, movement, colors, etc.), this indicates an attempt to deceive. Increasing the robustness of the cover detection on the card input hopper: If the card slot is hidden, the integrated camera CAMK displays a different image of the outside area than the other cameras do.

Die Erhöhung der Zuverlässigkeit der Erkennung von Manipulationsversuchen dient auch dazu, Fehlalarme zu vermeiden.The Increase the reliability of detection of Manipulation attempts also serve to avoid false alarms.

Zusammenfassend wird ein Selbstbedienungsterminal mit einer Kamera-Anordnung vorgeschlagen, die mehrere Kameras aufweist, welche im Nahbereich des Bedienfeldes des Selbstbedienungsterminals montiert sind und dort vorgesehene Elemente, wie z. B. Tastatur, Geldausgabefach, Karteneinschubtrichter erfassen, um Manipulationsversuchen an dem Selbstbedienungsterminal zu erkennen. Vorzugsweise ist eine der Kameras in dem Karteneinschubtrichter integriert. Die Kameras sind mit einer Datenverarbeitungseinheit verbunden, die die von den Kameras erzeugten Bilddaten verarbeitet. Die Bilddaten werden auch kombiniert und auswertet, um Manipulationen an einer oder mehreren der Kameras zu erkennen. Insbesondere werden hierzu Abweichungen ausgewertet, die den Bildinhalt, den Bildaufbau und/oder die Bildqualität, insbesondere die Bildausleuchtung und/oder Helligkeit, betreffen.In summary a self-service terminal with a camera arrangement is proposed, which has several cameras, which are in the vicinity of the control panel the self-service terminal are mounted and provided there Elements, such as B. keyboard, cash dispenser, card insertion funnel to attempt tampering with the self-service terminal to recognize. Preferably, one of the cameras is in the card insertion hopper integrated. The cameras come with a data processing unit connected, which processes the image data generated by the cameras. The Image data is also combined and evaluated to manipulations to recognize on one or more of the cameras. In particular, be For this purpose, deviations were evaluated, the image content, the image structure and / or the image quality, in particular the image illumination and / or brightness.

Die vorliegende Erfindung wurde am Beispiel eines Geldautomaten beschrieben, ist aber nicht hierauf beschränkt, sondern kann auf jede Art von Selbstbedienungsterminals angewendet werden.The The present invention has been described using the example of an ATM, but is not limited to this, but can be applied to any Type of self-service terminals are applied.

sowie eine Kamera-Anordnung mit:

CAMS: Kamera, seitlich des Bedienfeldes montiert
CAMD: Kamera, oberhalb des Bedienfeldes montiert
CAMK: Kamera, im Karteneingabetrichter montiert
CAMO: zusätzliche Portrait-Kamera
10: Datenverarbeitungseinheit mit:
11: erster Stufe zur Bildverarbeitung
12: zweiter Stufe zur Merkmalsextraktion
13: dritte Stufe zur Klassifikation
14, 15: Schnittstellen zu Videoüberwachung (CCTV) bzw. Bildfälschungserkennung
20: Videoüberwachungs- bzw. CCTV-Einheit mit:
21: Stufe für Bildaufnahme
22: Stufe für Komprimierung
23: Schnittstelle zu einen IP-Netz
24: Stufe für Parametrisierung

as well as a camera arrangement with:

CAMS: Camera, mounted on the side of the control panel
CAMD: Camera, mounted above the control panel
CAMK: Camera, mounted in card slot
CAMO: additional portrait camera
10: Data processing unit with:
11: first level for image processing
12: second stage for feature extraction
13: third stage for classification
14, 15: Interfaces to video surveillance (CCTV) or image counterfeit detection
20: Video surveillance or CCTV unit with:
21: Level for image capture
22: Level for compression
23: Interface to an IP network
24: Level for parameterization

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

- US 6583813 B1 [0003]

Claims

Self-service terminal (ATM), the elements provided in a control panel of the self-service terminal (ATM) ( 1 . 2 . 3 . 4 . 5 ), which are provided for users of the self-service terminal (ATM), wherein a camera arrangement with several cameras for monitoring the self-service terminal (ATM) is provided, characterized in that for detecting tampering attempts on the self-service terminal (ATM) at least two (ATM) CAMS, CAMD, CAMK) of the cameras are mounted on or in the self-service terminal (ATM) in the vicinity of the control panel (CP) and in each case at least one of the elements ( 1 . 2 . 3 . 4 . 5 ) to capture.

Self-service terminal (ATM) according to claim 1, characterized in that the at least two cameras (CAMS, CAMD, CAMK) with a data processing unit ( 10 ) processing the image data (D) generated by the cameras.

Self-service terminal (ATM) according to claim 1 or 2, characterized in that the elements detected by the cameras are manipulable elements ( 1 . 2 . 4 ) and / or arranged in manipulation-suitable areas of the control panel (CP) elements ( 3 . 5 ).

Self-service terminal (ATM) according to one of the preceding claims, characterized in that the elements provided in the control panel a cash dispenser ( 1 ), a keyboard ( 2 ), a storage area ( 3 ), a card entry funnel ( 4 ) and / or a screen ( 5 ).

Self service terminal (ATM) according to one of the preceding ones Claims, characterized in that at least two (CAMS, CAMD) of the cameras in a housing section surrounding the control panel (CP) the self-service terminal (ATM) are mounted, in particular in that housing section of the self-service terminal (ATM) installed on the control panel (CP) sideways or upwards limited.

Self-service terminal (ATM) according to one of the preceding claims, characterized in that each of the cameras (CAMS, CAMD, CAMK) in each case on at least one of the elements provided in the control panel (CP) ( 1 . 2 . 4 ) is aligned.

Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least one (CAMS) of the cameras is oriented, and in that this camera (CAMS) at least two of the elements provided in the control panel (CP) ( 1 . 2 ) detected, in particular controls detected that a cash dispenser ( 1 ) and a keyboard ( 2 ).

Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least one (CAMK) of the cameras in one of the elements provided in the control panel (CP) ( 4 ), in particular into a card entry funnel ( 4 ) is integrated.

Self-service terminal (ATM) according to one of claims 2 to 8, characterized in that the data processing unit ( 10 ) is integrated in the self-service terminal (ATM).

Self-service terminal (ATM) according to claim 2 or 9, characterized in that the data processing unit ( 10 ) a first stage receiving the image data (D) ( 11 ) for image processing, in particular for shadow removal, edge detection, vectorization and / or segmentation.

Self-service terminal (ATM) according to claim 10, characterized in that the data processing unit ( 10 ) one of the first stage ( 11 ) downstream second stage ( 12 ) for feature extraction, in particular by means of blob analysis, edge position and / or color distribution.

Self-service terminal (ATM) according to claim 11, characterized in that the data processing unit ( 10 ) a second stage ( 12 ) downstream third stage ( 13 ) for classification.

Self-service terminal (ATM) according to one of claims 9 to 12, characterized in that the data processing unit ( 10 ) Interfaces ( 14 . 15 ) for video surveillance systems ( 20 ) and / or security systems.

Self-service terminal (ATM) according to one of the preceding claims, characterized in that at least the elements detected by the respective camera (CAMS) ( 1 . 2 ) have optically clearly recognizable features, in particular have edges delimiting homogeneous surfaces.

Self service terminal (ATM) according to one of the preceding ones Claims, characterized in that at the self-service terminal (ATM) An additional camera (CAMO) for one area is provided, on which a user, in particular his head, himself during the operation of the self-service terminal (ATM) located.

Self-service terminal (ATM) according to one of claims 2 to 15, characterized in that the data processing unit ( 10 ), if by means of the processing of the image data (D) a manipulation attempt on the detected elements ( 1 . 2 ), triggers an alarm, locks the self-service terminal (ATM) and / or triggers the additional camera (CAMO).

Self-service terminal (ATM) according to one of claims 2 to 16, characterized in that the respective camera (CAMS) and / or the data processing unit ( 10 ) is disabled during operation and / or maintenance of the self-service terminal (ATM).

Camera arrangement for a self-service terminal (ATM), the elements provided in a control panel of the self-service terminal (ATM) ( 1 . 2 . 3 . 4 . 5 ), which are provided for users of the self-service terminal (ATM), wherein the camera arrangement is provided with several cameras for monitoring the self-service terminal (ATM), characterized in that for detecting tampering attempts on the self-service terminal (ATM) at least two (ATM) CAMS, CAMD, CAMK) of the cameras are mounted on or in the self-service terminal (ATM) in the vicinity of the control panel (CP) and in each case at least one of the elements ( 1 . 2 . 3 . 4 . 5 ) to capture.

Camera arrangement according to claim 18, characterized that the at least two cameras (CAMS, CAMD, CAMK) in the self-service terminal (ATM) are integrated.

Camera arrangement according to claim 18 or 19, characterized in that the at least two cameras (CAMS, CAMD, CAMK) with a data processing unit ( 10 ) processing the image data (D) generated by the cameras.