IT201800010534A1

IT201800010534A1 - Method and apparatus for the acquisition and validation of images

Info

Publication number: IT201800010534A1
Application number: IT102018000010534A
Authority: IT
Inventors: Andrea Mungo
Original assignee: Andrea Mungo
Priority date: 2018-11-23
Filing date: 2018-11-23
Publication date: 2020-05-23

Description

Descrizione di brevetto per invenzione industriale dal titolo: Patent description for industrial invention entitled:

“METODO ED APPARATO PER LA ACQUISIZIONE E VALIDAZIONE DI IMMAGINI” "METHOD AND APPARATUS FOR THE ACQUISITION AND VALIDATION OF IMAGES"

DESCRIZIONE DESCRIPTION

La presente invenzione si riferisce sotto un profilo più generale, ai metodi ed alle apparecchiature destinati alla rilevazione della guida e/o alla sicurezza stradale. The present invention relates from a more general point of view to the methods and equipment intended for detecting driving and / or road safety.

Come è noto, l’applicazione di sistemi di assistenza alla guida sulle automobili è un campo in forte espansione ed evoluzione, che ha come previsione finale anche quella di arrivare a produrre veicoli a guida autonoma. As is well known, the application of driving assistance systems on cars is a rapidly expanding and evolving field, which also has as its final forecast the production of self-driving vehicles.

Attualmente esistono già funzioni di controllo o assistenza alla guida semiautomatiche, vale a dire che consentono al veicolo di operare in autonomia ma sotto il controllo del guidatore, che può in qualsiasi momento riprendere i comandi e condurre il veicolo normalmente. Currently there are already semi-automatic control or driving assistance functions, that is to say they allow the vehicle to operate autonomously but under the control of the driver, who can at any time resume the commands and drive the vehicle normally.

L’evoluzione tecnologica nel settore che qui interessa, riguarda anche le apparecchiature per la rilevazione della guida un veicolo. The technological evolution in the sector that interests us here also concerns the equipment for detecting the driving of a vehicle.

Si tratta di dispositivi elettronici che possono essere installati a bordo dei veicoli come primo equipaggiamento oppure successivamente come apparecchi legati anche alla assicurazione del veicolo. These are electronic devices that can be installed on board vehicles as original equipment or later as devices also linked to vehicle insurance.

Questi dispositivi, comunemente chiamati “scatole nere”, rilevano le caratteristiche di guida di una persona quali la velocità, l’accelerazione, le distanze e gli itinerari percorsi, la geo-localizzazione del veicolo, permettendo di tracciare un profilo del guidatore e stipulare quindi delle polizze assicurative su misura per ciascuna persona. These devices, commonly called "black boxes", detect the driving characteristics of a person such as speed, acceleration, distances and routes traveled, the geo-localization of the vehicle, allowing you to trace a profile of the driver and then stipulate insurance policies tailored to each person.

Una evoluzione di questi dispositivi consiste nell’integrare e/o sostituire le informazioni sulla guida, con delle immagini riprese a bordo del veicolo. An evolution of these devices consists in integrating and / or replacing driving information with images taken on board the vehicle.

Ciò permette infatti di documentare in maniera completa le situazioni di guida del veicolo, soprattutto in caso di incidente stradale. This makes it possible to fully document the driving situations of the vehicle, especially in the event of a road accident.

Un esempio di questo stato della tecnica è descritto nella domanda di brevetto americana US 2003/028298 An example of this state of the art is described in the American patent application US 2003/028298

al., la quale rende noto un apparato che può essere posizionato su un veicolo come un'auto, un furgone o un autobus. al., which discloses an apparatus that can be positioned on a vehicle such as a car, van or bus.

Questo apparato comprende una telecamera, una memoria e un accelerometro a due assi, dove la memoria è dotata di un buffer circolare che viene riempito in maniera continuativa da un flusso di dati generato dalla telecamera e dall'accelerometro. This apparatus includes a camera, a memory and a two-axis accelerometer, where the memory is equipped with a circular buffer that is continuously filled by a stream of data generated by the camera and the accelerometer.

L’apparato è configurato per memorizzare in un'area permanente della memoria il contenuto del buffer circolare e il flusso dati generato dalla telecamera e dall'accelerometro per un periodo di tempo prestabilito (ad esempio 20-30 secondi), ogni volta che l'accelerometro rileva almeno un'accelerazione avente un'intensità associabile a quella che si verifica durante un incidente stradale. The device is configured to store the contents of the circular buffer and the data flow generated by the camera and the accelerometer in a permanent area of the memory for a predetermined period of time (for example 20-30 seconds), each time the accelerometer detects at least one acceleration having an intensity associated with that which occurs during a road accident.

In questo modo, il contenuto del buffer circolare relativo al periodo di tempo precedente all'istante in cui è avvenuto l'incidente e il flusso dati acquisito nel periodo di tempo contemporaneo e successivo a quello dell'istante dell'incidente, sono memorizzati in maniera permanente e/o trasmessi ad un server esterno attraverso mezzi di telecomunicazione, così da rendere possibile il loro successivo esame da parte del proprietario del veicolo e/o di una compagnia assicurativa e/o delle autorità competenti, come ad esempio gli organi di polizia o altro. In this way, the contents of the circular buffer relating to the period of time prior to the instant in which the accident occurred and the data flow acquired in the period of time simultaneous and subsequent to that of the instant of the accident, are stored in a permanent and / or transmitted to an external server through telecommunication means, so as to make possible their subsequent examination by the owner of the vehicle and / or an insurance company and / or competent authorities, such as the police or other.

Questo tipo di apparati elettronici con telecamere veicolari (noti anche con il nome di dashcam) presenta l'inconveniente che le informazioni da essi generate (filmati, dati telemetrici, ecc.) in occasione di un incidente, sono di difficile impiego nei contenziosi legali in quanto è problematico verificare in maniera oggettiva se queste informazioni siano autentiche o meno. This type of electronic equipment with vehicular cameras (also known as dashcam) has the drawback that the information generated by them (videos, telemetry data, etc.) during an accident, are difficult to use in legal disputes in how problematic it is to verify objectively whether this information is authentic or not.

In altri termini, non vi è certezza che dopo la loro generazione, le immagini non siano state modificate o alterate. In other words, there is no certainty that after their generation, the images have not been modified or altered.

Infatti, con i programmi (software), le apparecchiature e le conoscenze tecniche oggi disponibili, le persone esperte del ramo sono in grado di modificare in tutto o in parte i dati digitali memorizzati che costituiscono il filmato, così da poter alterarne la veridicità del contenuto, con il risultato che ciò che si vede alla fine non corrisponde alla realtà dei fatti che si vorrebbero documentare. In fact, with the programs (software), equipment and technical knowledge available today, people skilled in the field are able to modify all or part of the digital data stored that make up the movie, so as to be able to alter the veracity of the content. , with the result that what one sees in the end does not correspond to the reality of the facts that one would like to document.

Per questo motivo l'utilizzo probatorio delle immagini acquisite con dispositivi come quello descritto da Backy o con qualunque altro mezzo idoneo a realizzare video (es. videocamere, telefoni cellulari, ecc.) deve in genere essere convalidato o comunque verificato da un esperto chiamato ad esprimere il suo parere sull'autenticità e/o integrità delle evidenze presentate. For this reason, the evidential use of images acquired with devices such as the one described by Backy or with any other means suitable for making videos (e.g. video cameras, mobile phones, etc.) must generally be validated or in any case verified by an expert called to express his opinion on the authenticity and / or integrity of the evidence presented.

Un altro aspetto che limita l’applicazione di soluzioni note come quella descritta nella domanda di brevetto americana US 2003/028298, è quello dei cosiddetti falsi positivi. Another aspect that limits the application of known solutions such as that described in US patent application US 2003/028298, is that of so-called false positives.

Infatti, in queste applicazioni l’acquisizione delle immagini viene attivata da sensori accelerometrici, i quali non distinguono tra un evento effettivamente connesso ad un sinistro stradale ed uno accidentale, caratterizzati da una medesima variazione dei parametri rilevanti, cioè velocità ed accelerazione (positiva o negativa). In fact, in these applications the image acquisition is activated by accelerometric sensors, which do not distinguish between an event actually connected to a road accident and an accidental one, characterized by the same variation of the relevant parameters, i.e. speed and acceleration (positive or negative ).

In altre parole, se l’andatura del veicolo subisce una brusca decelerazione (cioè un’accelerazione negativa) a causa di una frenata improvvisa oppure di un urto per tamponamento, essa viene rilevata allo stesso modo dai sensori i quali non sono in grado di discriminare tra un evento effettivamente rilevante ed uno non significativo, cioè un falso positivo. Questa differenza può essere rilevata solo analizzando i rispettivi filmati, ma ciò comporta delle controindicazioni perché richiede comunque un dispendio di tempo e un intervento di operatori, i quali devono fare le verifiche del caso, allungando i tempi ed aumentando i costi della procedura. In other words, if the vehicle speed undergoes a sudden deceleration (i.e. negative acceleration) due to a sudden braking or a rear-end collision, it is detected in the same way by the sensors which are not able to discriminate. between an actually relevant event and an insignificant one, ie a false positive. This difference can only be detected by analyzing the respective videos, but this entails contraindications because it still requires a waste of time and the intervention of operators, who must make the necessary checks, lengthening the times and increasing the costs of the procedure.

Peraltro, nel caso di sistemi come quello descritto nella domanda di brevetto US 2003/028298, in cui le immagini filmate vengono trasmesse a distanza dai dispositivi installati sui veicoli agli elaboratori informatici della compagnia assicurativa, se un numero elevato di utenze trasmettesse immagini filmate, si correrebbe il rischio di avere un intasamento delle infrastrutture e/o un sovraccarico di lavoro per analizzare tutti i filmati, al fine di scartare quelli che non riguardano incidenti effettivi. Moreover, in the case of systems such as the one described in US patent application 2003/028298, in which the filmed images are transmitted remotely from the devices installed on the vehicles to the computer computers of the insurance company, if a large number of users transmit filmed images, it would run the risk of having a clogging of the infrastructures and / or an overload of work to analyze all the films, in order to discard those that do not concern actual incidents.

Questa situazione impedisce o comunque limita di fatto le possibilità di impiego di immagini provenienti da fonti differenti o eterogenee rispetto ai dispositivi installati a bordo dei veicoli, come le immagini riprese da telecamere di sorveglianza stradali, mobili o fisse, telefoni cellulari, o altri mezzi esterni. This situation prevents or in any case actually limits the possibilities of using images from different or heterogeneous sources with respect to the devices installed on board the vehicles, such as images taken by road, mobile or fixed surveillance cameras, cell phones, or other external means. .

Un primo problema tecnico che la presente invenzione si propone di risolvere, è quello di mettere a disposizione un metodo per l’acquisizione di immagini e/o la loro validazione, in particolare per applicazioni stradali, che sia in grado di superare gli inconvenienti sopra delineati in relazione allo stato della tecnica considerato. A first technical problem that the present invention aims to solve is that of providing a method for acquiring images and / or their validation, in particular for road applications, which is capable of overcoming the drawbacks outlined above. in relation to the state of the art considered.

Un secondo problema tecnico che si pone alla base dell’invenzione, è quello di realizzare un sistema e/o un apparato per la rilevazione di immagini, in particolare per applicazioni stradali, con caratteristiche strutturali e funzionali tali da consentire di acquisire immagini in modo affidabile o comunque mirato principalmente ad eventi rilevanti, quali gli incidenti stradali. A second technical problem underlying the invention is that of realizing a system and / or apparatus for the detection of images, in particular for road applications, with structural and functional characteristics such as to allow the acquisition of images in a reliable way. or in any case mainly aimed at significant events, such as road accidents.

Un ulteriore scopo che la presente invenzione si propone di raggiungere, è quello di realizzare un sistema e/o un apparato per la rilevazione di immagini, in particolare per applicazioni stradali, con caratteristiche strutturali e funzionali tali da consentire una validazione di immagini acquisite anche da fonti differenti e/o eterogenee. A further object that the present invention proposes to achieve is that of realizing a system and / or an apparatus for the detection of images, in particular for road applications, with structural and functional characteristics such as to allow validation of images acquired also by different and / or heterogeneous sources.

L’idea di soluzione del problema tecnico sopra menzionato, è quella di associare e/o elaborare i contenuti video non solo, e non tanto, con i dati telemetrici (posizione, tempo, velocità, accelerazione ecc.), ma piuttosto con le tracce audio degli eventi stessi. The idea of solving the aforementioned technical problem is to associate and / or process the video contents not only, and not so much, with the telemetry data (position, time, speed, acceleration, etc.), but rather with the tracks audio of the events themselves.

A tal fine si segnala che, come risulterà meglio dal prosieguo di questa descrizione, le fonti differenti e/o eterogenee menzionate possono essere sia inerenti ai diversi mezzi tecnici utilizzati per l’acquisizione, come ad esempio i video amatoriali o quelli ottenuti da telecamere senza microfono (es. quelle di videosorveglianza), oppure le immagini o i suoni captati da una conversazione telefonica, sia inerenti alla natura analogica o digitale dei contenuti video-audio nonché a quella tecnologica impiegata, come le immagini ad infrarossi o le vibrazioni prodotte da onde sonore. To this end, it should be noted that, as will become clearer from the continuation of this description, the different and / or heterogeneous sources mentioned may be both inherent to the different technical means used for the acquisition, such as amateur videos or those obtained from cameras without microphone (e.g. those of video surveillance), or the images or sounds captured by a telephone conversation, both inherent to the analogue or digital nature of the video-audio content as well as to the technological one used, such as infrared images or vibrations produced by sound waves .

Le caratteristiche dell’invenzione sono enunciate più specificamente nelle rivendicazioni annesse a questa descrizione. The features of the invention are set out more specifically in the claims annexed to this description.

Tali caratteristiche, gli effetti che ne derivano ed i vantaggi conseguiti dall’invenzione, risulteranno maggiormente dalla descrizione che viene di seguito esposta, relativamente ad un possibile esempio realizzativo del trovato illustrato nei disegni allegati e forniti a titolo indicativo e non limitativo, in cui: These characteristics, the resulting effects and the advantages achieved by the invention, will emerge more clearly from the description that is set out below, in relation to a possible embodiment of the invention illustrated in the attached drawings and provided by way of non-limiting example, in which:

- Fig. 1 mostra schematicamente un sistema per l’acquisizione di immagini secondo l’invenzione; - Fig. 1 schematically shows a system for the acquisition of images according to the invention;

- Fig. 2 mostra un dispositivo sotto forma di telefono mobile, per l’attuazione di alcune fasi del metodo secondo l’invenzione; - Fig. 2 shows a device in the form of a mobile phone, for the implementation of some steps of the method according to the invention;

- Fig. 3 è uno schema a blocchi relativo al dispositivo per l’attuazione di alcune fasi del metodo secondo l’invenzione; - Fig. 4 è un diagramma che illustra le frequenze di suoni rilevati nel metodo secondo l’invenzione; - Fig. 3 is a block diagram relating to the device for implementing some phases of the method according to the invention; - Fig. 4 is a diagram illustrating the frequencies of sounds detected in the method according to the invention;

- Fig. 5 mostra due grafici indicativi dell’andamento di suoni rilevati nel metodo secondo l’invenzione; - Fig. 5 shows two graphs indicative of the trend of sounds detected in the method according to the invention;

- Fig. 6 è un diagramma di flusso che mostra alcune delle fasi di attuazione del metodo secondo l’invenzione; - Fig. 6 is a flow chart showing some of the implementation steps of the method according to the invention;

- Fig. 7 mostra una variante del sistema di fig. 1; - Fig. 7 shows a variant of the system of fig. 1;

- Fig. 8 è uno schema a blocchi che illustra una parte del sistema di fig. 7. - Fig. 8 is a block diagram illustrating a part of the system of Fig. 7.

Con riferimento alle figure sopra elencate, la prima di esse mostra in modo schematico un sistema per l’acquisizione e la validazione di immagini, in accordo con l’invenzione. With reference to the figures listed above, the first of them schematically shows a system for the acquisition and validation of images, in accordance with the invention.

Prima di procedere a descrivere quanto mostrato nelle figure, è solo il caso di precisare che anche le persone non particolarmente esperte del ramo, riconosceranno che alcuni elementi delle figure sono stati illustrati in forma ingrandita (cioè non in scala), per semplicità e chiarezza. Alla stessa stregua, nei disegni non sono riportati elementi comuni o noti che sono utili o eventualmente necessari per una realizzazione commercialmente fattibile dell’invenzione, ma che le persone esperte del ramo sono in grado di riconoscere, per non appesantire la spiegazione ed agevolare la comprensione delle caratteristiche più rilevanti dell’invenzione. Before proceeding to describe what is shown in the figures, it is only necessary to specify that even people not particularly skilled in the art will recognize that some elements of the figures have been illustrated in enlarged form (i.e. not to scale), for simplicity and clarity. Likewise, in the drawings there are no common or known elements which are useful or possibly necessary for a commercially feasible realization of the invention, but which those skilled in the art are able to recognize, so as not to burden the explanation and facilitate understanding. of the most relevant features of the invention.

Ulteriormente, le persone del ramo riconosceranno che alcune implementazioni specifiche possono essere attuate tramite componenti circuitali (i.e. hardware) oppure programmi informatici (software), applicati ad uno o più degli elementi descritti. Further, the persons of the art will recognize that some specific implementations can be implemented through circuit components (i.e. hardware) or computer programs (software), applied to one or more of the elements described.

Pertanto, il riferimento ad "una forma di attuazione" all'interno di questa descrizione sta ad indicare che una particolare configurazione, struttura o caratteristica mostrata o descritta, è compresa in almeno una forma di realizzazione del trovato. Therefore, the reference to "an embodiment" within this description indicates that a particular configuration, structure or feature shown or described is included in at least one embodiment of the invention.

Analogamente, le espressioni come "in una forma di attuazione" e simili, presenti in diverse parti all'interno di questa descrizione, non sono necessariamente tutte riferite ad una unica e stessa forma di attuazione. Inoltre, le particolari configurazioni, strutture o caratteristiche, possono essere combinate in modo adeguato in una o più forme di attuazione. Similarly, the expressions such as "in one embodiment" and the like, present in different parts within this description, do not necessarily all refer to a single and the same embodiment. Furthermore, the particular configurations, structures or features can be suitably combined in one or more embodiments.

Fatta questa premessa, in una prima forma realizzativa un sistema secondo l’invenzione, complessivamente indicato con il riferimento numerico 1, comprende un dispositivo mobile 10 di acquisizione di immagini, atto ad essere associato ad un autoveicolo 11. Having said this, in a first embodiment a system according to the invention, indicated as a whole with the numerical reference 1, comprises a mobile device 10 for acquiring images, adapted to be associated with a motor vehicle 11.

Quest’ultimo può essere un’automobile 11 (di cui fig. 1 mostra solo una parte dell’abitacolo), oppure un furgone, un autocarro ma, eventualmente, potrà anche essere un motociclo, un natante o un altro veicolo. The latter can be a car 11 (of which fig. 1 shows only a part of the passenger compartment), or a van, a truck but, possibly, it could also be a motorcycle, a boat or another vehicle.

Il dispositivo 10 è in questo esempio un terminale mobile per telecomunicazioni, quale un telefono cellulare dotato di funzioni video, audio e di registrazione, oppure una tavoletta elettronica (c.d. tablet), ma potrebbe anche essere un dispositivo specifico quale ad esempio del tipo denominato “scatola nera”, come quello descritto nella domanda di brevetto americano US2003/0028298. The device 10 is in this example a mobile telecommunications terminal, such as a mobile phone equipped with video, audio and recording functions, or an electronic tablet (so-called tablet), but it could also be a specific device such as, for example, of the type called " black box ", such as that described in US patent application US2003 / 0028298.

In particolare, le dotazioni tecniche minimali del dispositivo mobile 10 comprendono almeno un'unità di elaborazione (tipo CPU o simili) 110; elementi di trasmissione 111 per trasmettere dati a distanza tramite la rete di telecomunicazioni TLC; una prima memoria 112 contenente almeno un programma di acquisizione dati, come ad esempio una applicazione A per telefoni cellulari, preferibilmente del tipo scaricabile attraverso la rete internet; una seconda memoria 113 per il salvataggio dei dati rilevanti, che vengono poi trasmessi a distanza via rete TLC dagli elementi 111, per la loro validazione; dei mezzi o sensori accelerometrici 114 per determinare le variazioni di accelerazione a cui è soggetto il dispositivo mobile 10. In particular, the minimal technical features of the mobile device 10 comprise at least a processing unit (CPU type or the like) 110; transmission elements 111 for transmitting data remotely via the telecommunications network TLC; a first memory 112 containing at least one data acquisition program, such as for example an application A for cellular phones, preferably of the type downloadable through the Internet; a second memory 113 for saving the relevant data, which are then remotely transmitted via the TLC network by the elements 111, for their validation; accelerometric means or sensors 114 for determining the acceleration variations to which the mobile device 10 is subjected.

Come risulterà meglio nel seguito, il dispositivo mobile 10 potrà anche essere realizzato sotto forma di equipaggiamento incorporato nelle dotazioni di bordo dell’autoveicolo 11, ad esempio nell’elaboratore (i.e. computer) che governa il suo funzionamento, oppure nell’impianto di telecomunicazioni di bordo che potrà eventualmente essere collegato (via bluetooth® o altro) al telefono portatile del guidatore, oppure anche associato con il navigatore satellitare. As will become clearer in the following, the mobile device 10 can also be realized in the form of equipment incorporated in the on-board equipment of the motor vehicle 11, for example in the computer (i.e. computer) that governs its operation, or in the telecommunications system of on board that can possibly be connected (via bluetooth® or other) to the driver's portable phone, or even associated with the satellite navigator.

Pertanto, in tal caso i componenti 110-114 sopra citati con riferimento al dispositivo o telefono mobile 10, potranno essere incorporati o integrati, in tutto o in parte, nell’equipaggiamento dell’autoveicolo 11, anche in modo strutturalmente separato ma operativamente collegati tra loro con una rete cablata o senza cavi (c.d. wireless), dei bus e simili elementi noti agli esperti del ramo, alcuni dei quali visibili nello schema di figura 3. Therefore, in this case the components 110-114 mentioned above with reference to the device or mobile telephone 10, can be incorporated or integrated, in whole or in part, in the equipment of the motor vehicle 11, even in a structurally separate way but operationally connected between them with a wired or wireless network (so-called wireless), buses and similar elements known to those skilled in the art, some of which can be seen in the diagram of Figure 3.

L’esempio mostrato in figura 1 che prevede l’utilizzo di un telefono cellulare, si presta ad una più agevole comprensione ed applicazione del trovato, visto l’uso ormai pervasivo che di questi apparecchi viene fatto dalle persone. The example shown in figure 1, which involves the use of a mobile phone, lends itself to an easier understanding and application of the invention, given the now pervasive use of these devices by people.

In particolare, il telefono 10 è del tipo cosiddetto “smartphone”, equipaggiato con tutte le dotazioni necessarie (memoria, processore, videocamera, microfono, sensore accelerometrico, ecc.) ad attuare l’invenzione come risulterà meglio dal prosieguo. In particular, the phone 10 is of the so-called "smartphone" type, equipped with all the necessary equipment (memory, processor, video camera, microphone, accelerometric sensor, etc.) to implement the invention as will be clearer from the following.

A tal fine nel telefono 10 è installata l’applicazione A, vale a dire un programma che può essere facilmente avviato da un utilizzatore con un comando al tocco premendo con un dito su una icona presente sullo schermo tattile dell’apparecchio oppure con un comando vocale, come avviene oggi per molte applicazioni commercialmente disponibili. In questo modo, quando una persona sale in macchina installa il telefono 10 sul cruscotto o vicino al parabrezza; qualunque supporto adatto allo scopo potrà essere utilizzato, che consenta di disporre il telefono in posizione idonea per la ripresa di immagini della strada durante la guida. For this purpose, application A is installed in the telephone 10, i.e. a program that can be easily started by a user with a touch command by pressing with a finger on an icon on the touch screen of the device or with a voice command. , as is the case with many commercially available applications today. In this way, when a person gets into the car, he installs the telephone 10 on the dashboard or near the windshield; any support suitable for the purpose can be used, which allows the telephone to be placed in a suitable position for taking pictures of the road while driving.

Preferibilmente, l’applicazione A installata sul telefono 10 consente a quest’ultimo di effettuare non solo la ripresa di immagini video, ma anche la registrazione di suoni dall’interno dell’abitacolo del veicolo 11. Preferably, the application A installed on the phone 10 allows the latter to carry out not only the shooting of video images, but also the recording of sounds from inside the passenger compartment of the vehicle 11.

In particolare, l’applicazione A comanda il funzionamento del telefono 10 in modo da attivare la memorizzazione delle tracce audio e video acquisite dalla videocamera 101 e dal microfono 102 del telefono 10, in una prima memoria locale 112 di questo e/o in una o più schede di memoria (tipo “flash”) alloggiate al suo interno, o su qualunque altro supporto appropriato. In particular, the application A controls the operation of the telephone 10 so as to activate the storage of the audio and video tracks acquired by the video camera 101 and the microphone 102 of the telephone 10, in a first local memory 112 of the latter and / or in one or more multiple memory cards (“flash” type) housed in it, or on any other appropriate media.

Per limitare il quantitativo di dati contenuti nella/e memoria/e del telefono 10, a mano a mano che vengono acquisiti quelli nuovi sono sovrascritti ciclicamente sui precedenti con intervalli temporali prefissati, come ad esempio alcune decine di secondi (20—30) o qualche minuto, preferibilmente in una memoria tampone o “buffer” di tipo circolare. To limit the amount of data contained in the memory (s) of the telephone 10, as the new ones are acquired they are cyclically overwritten on the previous ones with predetermined time intervals, such as for example a few tens of seconds (20-30) or some minute, preferably in a buffer memory or “buffer” of the circular type.

Si evidenzia che gli stessi mezzi di memoria 112 del telefono 10 possono anche servire a contenere i dati del buffer circolare, semplificando così l'architettura dell'apparato. Infatti, come già detto sopra, il buffer circolare può essere implementato organizzando adeguatamente la gestione delle letture e delle scritture su una generica memoria, attraverso un opportuno programma (software) e mezzi (hardware) informatici che le persone esperte del ramo sono in grado di sviluppare. It should be noted that the same memory means 112 of the telephone 10 can also serve to contain the data of the circular buffer, thus simplifying the architecture of the apparatus. In fact, as already mentioned above, the circular buffer can be implemented by adequately organizing the management of reads and writes on a generic memory, through an appropriate program (software) and computer (hardware) means that people skilled in the field are able to develop.

Questa procedura viene interrotta nel caso succeda un evento rilevante, vale a dire un incidente stradale o un sinistro. In tal caso, infatti, l’applicazione A comanda il salvataggio dei dati audio-video acquisiti, insieme a quelli telemetrici e/o di localizzazione, in una apposita memoria 113 (preferibilmente non riscrivibile) da cui sono poi trasmessi a distanza dal telefono 10, tramite la rete di telecomunicazioni TLC, al centro di controllo 20 del sistema che eseguirà la successiva validazione dei dati. This procedure is interrupted in the event of a significant event, that is to say a road accident or a claim. In this case, in fact, application A commands the saving of the acquired audio-video data, together with the telemetry and / or localization data, in a special memory 113 (preferably not rewritable) from which they are then transmitted remotely by the telephone 10 , through the telecommunications network TLC, to the control center 20 of the system which will perform the subsequent validation of the data.

Di preferenza, i dati salvati sono memorizzati e trasmessi in forma crittografata con un codice di cifratura che dipenderà dal livello di sicurezza richiesto. Preferably, the saved data is stored and transmitted in encrypted form with an encryption code which will depend on the level of security required.

In sintesi si può dire che l’applicazione A, quando viene avviata, fa compiere al telefono 10 ed ai suoi componenti interni una serie di fasi operative, tra cui quella di acquisire un flusso dati video/audio generato dalla telecamera 101 e dal microfono 102, preferibilmente compressi in un formato appropriato quale potrebbero essere ad esempio uno di quelli noti con le sigle MP3, MP4, MPEG e simili. In summary, it can be said that application A, when started, causes the telephone 10 and its internal components to perform a series of operating phases, including that of acquiring a video / audio data stream generated by the camera 101 and the microphone 102. , preferably compressed in an appropriate format such as for example one of those known with the abbreviations MP3, MP4, MPEG and the like.

I dati relativi ad un evento specifico sono poi crittografati, salvati e trasmessi a distanza, via rete di telecomunicazioni. The data relating to a specific event are then encrypted, saved and transmitted remotely via the telecommunications network.

Contestualmente a ciò, l’applicazione A opera anche la acquisizione e memorizzazione secondo gli stessi principi, dei dati relativi alla posizione del telefono mobile 10 forniti dai mezzi di geo-localizzazione 103 di cui esso è dotato, oltre a quella dei dati telemetrici (velocità, accelerazione) forniti dal sensore accelerometrico 104 di cui è dotato il telefono mobile 10. At the same time, application A also acquires and stores, according to the same principles, the data relating to the position of the mobile phone 10 provided by the geo-localization means 103 with which it is equipped, in addition to that of the telemetry data (speed , acceleration) provided by the accelerometric sensor 104 with which the mobile phone 10 is equipped.

Questi dati memorizzati in relazione ad un evento specifico sono trasmessi attraverso la rete di telecomunicazioni (TLC) al centro di controllo 20, dove vengono elaborati per verificarne l’integrità ed autenticità. These data stored in relation to a specific event are transmitted through the telecommunications network (TLC) to the control center 20, where they are processed to verify their integrity and authenticity.

Il salvataggio dei dati relativi ad eventi rilevanti, quali i sinistri stradali in questo caso, e/o la loro trasmissione a distanza al centro di controllo 20, è attuato dal telefono mobile 10 sulla base di una procedura che può essere avviata in funzione di uno o più parametri, quali i rumori rilevati dal telefono mobile 10 all’interno dell’abitacolo, suoni e/o vibrazioni esterni compatibili con i sinistri in questione, ma anche le brusche variazioni di velocità. The saving of data relating to significant events, such as road accidents in this case, and / or their remote transmission to the control center 20, is carried out by the mobile phone 10 on the basis of a procedure that can be started according to one or more parameters, such as the noises detected by the mobile phone 10 inside the passenger compartment, external sounds and / or vibrations compatible with the claims in question, but also the abrupt speed variations.

Pertanto, in accordo con l’invenzione, l’avvio della fase di salvataggio viene fatto preferibilmente sulla base di una o più delle seguenti alternative: i rumori, suoni, vibrazioni anzidetti rilevati dal telefono 10; i dati accelerometrici cioè quando il sensore 114 segnala una brusca variazione di velocità; una combinazione di queste due alternative, che permette di aumentare l’efficacia del sistema incrociando più parametri. Therefore, in accordance with the invention, the start of the saving phase is preferably done on the basis of one or more of the following alternatives: the aforementioned noises, sounds, vibrations detected by the telephone 10; the accelerometric data, i.e. when the sensor 114 signals a sudden speed variation; a combination of these two alternatives, which allows you to increase the effectiveness of the system by crossing multiple parameters.

Così, ad esempio, se il telefono cade nell’abitacolo è possibile che segnali una brusca variazione di velocità a causa dell’impatto, però ciò non determina delle variazioni particolari dei suoni acquisiti nell’abitacolo. Thus, for example, if the phone falls into the passenger compartment it is possible that it signals a sudden change in speed due to the impact, but this does not cause particular variations in the sounds acquired in the passenger compartment.

Ad ogni modo, nel caso di rumori differenti o comunque in dissonanza rispetto a quelli rilevati prima dell’evento, per frequenza, ampiezza, timbro, livello sonoro, o altro parametro acustico o vibrazionale, il sistema può avviare la procedura di salvataggio dei dati. In any case, in the case of different noises or in any case in dissonance with those detected before the event, for frequency, amplitude, timbre, sound level, or other acoustic or vibrational parameter, the system can start the data saving procedure.

Questo riduce notevolmente la possibilità di errori o comunque di segnalazioni non corrette (es. i falsi positivi); ulteriormente, le fasi attuative del metodo, che meglio risulteranno nel prosieguo, sono operativamente flessibili così da poter gestire anche il livello di selezione, vale a dire di filtrare gli eventi per i quali la verifica dei dati raggiunga livelli prefissati di attendibilità. This considerably reduces the possibility of errors or in any case of incorrect reports (eg false positives); furthermore, the implementation phases of the method, which will be better described below, are operationally flexible so as to be able to manage the selection level as well, that is to say, to filter the events for which the verification of the data reaches predetermined levels of reliability.

Inoltre, la rilevazione di una traccia audio associata a parametri quali suoni e/o vibrazioni registrati all’interno dell’abitacolo, può essere vantaggiosamente sfruttata anche per la successiva validazione da parte di terzi, delle immagini e dei dati acquisiti. In addition, the detection of an audio track associated with parameters such as sounds and / or vibrations recorded inside the passenger compartment can also be advantageously exploited for subsequent validation by third parties of the images and data acquired.

A tal fine, secondo il metodo del presente trovato la traccia audio rilevata viene campionata dal telefono 10, in modo da distinguere le frequenze dei suoni presenti durante la corsa del veicolo 11. To this end, according to the method of the present invention, the detected audio track is sampled by the telephone 10, so as to distinguish the frequencies of the sounds present during the travel of the vehicle 11.

Lo spettro dei suoni campionati in condizioni di marcia ordinarie, corrisponde al rumore di fondo nell’abitacolo. La sua traccia audio contiene quindi dati relativi al rumore del motore dell’autoveicolo, a quello del rotolamento dei pneumatici sulla strada, al traffico, alle voci dei viaggiatori nell’abitacolo, ai suoni esterni (es. clacson, sirene ecc.) e quant’altro. The spectrum of sounds sampled in ordinary driving conditions corresponds to the background noise in the passenger compartment. Its audio track therefore contains data relating to the noise of the vehicle engine, that of the rolling of tires on the road, traffic, the voices of travelers in the passenger compartment, external sounds (e.g. horns, sirens, etc.) and how many 'other.

Se vengono rilevati degli scostamenti di frequenza, ampiezza, livello sonoro o timbro, nei suoni campionati contenuti nella traccia audio, o comunque se si riscontra un contrasto, una dissonanza, superiore ad un valore prefissato rispetto ai suoni rilevati in precedenza, questa informazione può venire vantaggiosamente sfruttata per avviare la procedura di salvataggio dei dati e delle immagini relative ad un sinistro, di cui si è detto sopra. If deviations in frequency, amplitude, sound level or timbre are detected in the sampled sounds contained in the audio track, or in any case if a contrast, a dissonance, higher than a predetermined value with respect to the previously detected sounds is found, this information can be advantageously used to start the procedure for saving the data and images relating to a claim, as mentioned above.

Infatti, grazie alla analisi dei suoni campionati è possibile distinguere in modo rapido ed affidabile, non solo se un determinato suono è riferibile ad un impatto del veicolo in caso di incidente contro un altro veicolo oppure contro un ostacolo, ma anche se i vari rumori rilevati nell’occasione all’interno dell’abitacolo, come ad esempio le voci del guidatore o dei passeggeri, il suono di un clacson, l’innesco di dispositivi di sicurezza gonfiabili (c.d. air-bag) o quelli di contenimento (cinture) e simili, siano anch’essi associati al medesimo sinistro. In fact, thanks to the analysis of the sampled sounds it is possible to distinguish quickly and reliably, not only if a certain sound is referable to a vehicle impact in the event of an accident against another vehicle or against an obstacle, but also if the various noises detected when inside the passenger compartment, such as the voices of the driver or passengers, the sound of a horn, the triggering of inflatable safety devices (so-called air-bags) or containment devices (belts) and the like , are also associated with the same claim.

Per questo scopo il telefono mobile 10 è configurato per eseguire il programma o applicazione A, in modo da acquisire un flusso di dati audio-video generato dalla telecamera 101 e dal microfono 102, oltre quello di dati di geolocalizzazione generato dai mezzi di posizionamento, quello di dati telemetrici generato dai sensori accelerometrici, ad istanti successivi con una frequenza prefissata che è variabile da caso a caso ma che è preferibilmente superiore a 10 Hz. For this purpose the mobile phone 10 is configured to execute the program or application A, so as to acquire an audio-video data stream generated by the camera 101 and the microphone 102, in addition to the geolocation data generated by the positioning means, that of telemetry data generated by the accelerometric sensors, at successive instants with a predetermined frequency which varies from case to case but which is preferably higher than 10 Hz.

La campionatura dei suoni avviene invece con frequenze che sono preferibilmente quelle nel campo dell’orecchio umano, vale a dire tra 20 e 20.000 Hz circa, anche se occorre segnalare che per rendere più selettivo il metodo dell’invenzione, è possibile filtrare i suoni al di sopra o al di sotto di certi valori di soglia. On the other hand, the sampling of sounds takes place with frequencies that are preferably those in the field of the human ear, i.e. between 20 and 20,000 Hz approximately, although it should be noted that to make the method of the invention more selective, it is possible to filter the sounds at above or below certain threshold values.

In particolare, per la presente invenzione il campionamento e l’analisi spettrale dei segnali acustici associati ai vari rumori di cui sopra, viene eseguito preferibilmente con la trasformata di Fourier dipendente dal tempo (detta anche Fourier Transform, brevemente FT, oppure Fast Fourier Transform, acronimo FFT). In particular, for the present invention, the sampling and spectral analysis of the acoustic signals associated with the various noises mentioned above, is preferably performed with the time-dependent Fourier transform (also called Fourier Transform, briefly FT, or Fast Fourier Transform, acronym FFT).

Vista la natura e la irregolarità dei rumori associati alla marcia del veicolo, preferibilmente viene applicata una trasformata di Fourier per segnali aperiodici, con tempi discreti (Discrete Time Fourier Transform, brevemente DTFT) corrispondenti agli intervalli di campionamento dei suoni. Come è noto, per la teoria dei campionamenti (Nyquist) la frequenza di elaborazione (sample rate) di un segnale deve essere più grande del doppio di quella del segnale stesso. Nel caso che qui interessa, dove il rumore di fondo nell’abitacolo del veicolo è irregolare e comprende varie componenti armoniche e non armoniche con frequenze, ampiezze e durate non prevedibili, converrà stabilire una o più frequenze da prendere in considerazione. Given the nature and irregularity of the noises associated with the running of the vehicle, a Fourier transform is preferably applied for aperiodic signals, with discrete times (DTFT for short) corresponding to the sampling intervals of the sounds. As is known, for the theory of sampling (Nyquist) the processing frequency (sample rate) of a signal must be greater than twice that of the signal itself. In the case of interest here, where the background noise in the passenger compartment of the vehicle is irregular and includes various harmonic and non-harmonic components with unpredictable frequencies, amplitudes and durations, it will be convenient to establish one or more frequencies to be taken into consideration.

Così, ad esempio, con riferimento al diagramma di fig. 4 è riportato lo spettro acustico di un suono complesso come potrebbe essere quello del rumore di fondo in un abitacolo di un veicolo durante la marcia, che comprende numerose componenti come il motore (tipicamente i motori delle automobili hanno regimi di funzionamento in condizioni ordinarie che vanno da 1.500 a 6.000 giri/min, cioè con frequenze che vanno da 25 a 100 Hz), il rotolamento dei pneumatici (ad una velocità di 100 Km/h la frequenza della rotazione è di circa 8-10 Hz), le voci delle persone, e così via. Thus, for example, with reference to the diagram of fig. 4 shows the acoustic spectrum of a complex sound such as that of the background noise in a passenger compartment of a vehicle while driving, which includes numerous components such as the engine (typically automobile engines have operating speeds in ordinary conditions ranging from from 1,500 to 6,000 rpm, i.e. with frequencies ranging from 25 to 100 Hz), the rolling of the tires (at a speed of 100 Km / h the frequency of rotation is about 8-10 Hz), people's voices , and so on.

Di preferenza la frequenza di riferimento per la campionatura sarà quella della componente sinusoidale avente la frequenza più alta (in figura 4, quella di 440 Hz); la campionatura avverrà quindi con una frequenza almeno due volte maggiore di essa. Preferably, the reference frequency for sampling will be that of the sinusoidal component having the highest frequency (in Figure 4, that of 440 Hz); sampling will therefore take place at least twice as often as it is.

Vantaggiosamente, sulla base delle frequenze è inoltre possibile stabilire anche la durata delle finestre o intervalli di campionamento, ovvero il periodo discreto di tempo entro cui si effettua l’analisi del segnale campionato il quale viene considerato stazionario in tale finestra, cioè trascurando o comunque limitando i transitori. Advantageously, on the basis of the frequencies, it is also possible to establish the duration of the sampling windows or intervals, i.e. the discrete period of time within which the analysis of the sampled signal is carried out, which is considered stationary in this window, i.e. neglecting or limiting the transients.

Tali finestre devono essere sufficientemente corte e potranno essere nell’ordine di frazioni di secondo ma anche di qualche secondo, in funzione del tipo di segnale e/o delle condizioni di marcia del veicolo o altre circostanze. These windows must be sufficiently short and may be in the order of fractions of a second but also of a few seconds, depending on the type of signal and / or the running conditions of the vehicle or other circumstances.

In tal caso si parla anche di Trasformata di Fourier per Tempi Brevi (Short Time Fourier Transform o STFT). In this case we also speak of Short Time Fourier Transform or STFT.

Nell’ambito di questi intervalli si possono quindi ottenere delle campionature di suoni, come raffigurate nella figura 5, dove il grafico (a) rappresenta un andamento complesso dato dalla risultante di varie componenti come potrebbero essere alcune di quelle indicate in precedenza, mentre il grafico (b) illustra l’andamento di una componente armonica (ad esempio quella del motore che gira ad un determinato numero di giri) in una delle finestre di tempo di campionatura anzidette. Within these intervals it is therefore possible to obtain samples of sounds, as depicted in figure 5, where graph (a) represents a complex trend given by the resultant of various components, such as some of those indicated above, while the graph (b) illustrates the trend of a harmonic component (for example that of the motor which turns at a given number of revolutions) in one of the aforementioned sampling time windows.

E’ comunque da rilevare come indipendentemente da queste spiegazioni, la campionatura potrà essere effettuata seguendo criteri diversi, vale a dire prendendo in considerazione anche altri parametri oltre, o in alternativa, alle frequenze. However, it should be noted that regardless of these explanations, the sampling can be carried out following different criteria, that is, taking into account other parameters besides, or alternatively, the frequencies.

Per esempio si potrà utilizzare la potenza sonora, ovvero la potenza (in watt) associata ad un suono, oppure l’intensità sonora (cioè la potenza riferita ad una unità di superficie, quale potrebbe essere anche quella dell’abitacolo), o il livello di potenza sonora (in decibel). For example, you can use the sound power, or the power (in watts) associated with a sound, or the sound intensity (ie the power referred to a unit of surface, which could also be that of the passenger compartment), or the level of sound power (in decibels).

Questi parametri possono essere usati singolarmente, in combinazione tra loro e con le frequenze dei suoni di cui sopra, per aumentare la selettività dei suoni campionati. Ma soprattutto, ciò che rileva è che la campionatura può anche essere fatta in modo dinamico, vale a dire operando in base ad uno o più dei vari parametri sopra considerati, in funzione delle condizioni attuali di marcia del veicolo. Infatti è evidente che in un tratto urbano si avrà un regime di marcia piuttosto irregolare, con arresti e partenze frequenti, velocità variabili (ricordiamo che il limite massimo di velocità in città è di solito di 50 km/h), cambi di direzione, interazioni con altri veicoli e quant’altro. Diventa quindi difficile poter selezionare gli eventi non rilevanti (cioè i falsi positivi) da quelli che riguardano i sinistri, che nel traffico urbano sono piuttosto frequenti. In altri termini, se si desidera avere una acquisizione di dati affidabile in queste situazioni, non ci sono molte alternative: o si adottano soluzioni con un grado di approssimazione elevato e che pertanto contengono molti falsi positivi, o bisogna poter fare affidamento su un sistema flessibile che sia capace di adattarsi alla variabilità del regime di marcia di un vicolo. These parameters can be used individually, in combination with each other and with the frequencies of the above sounds, to increase the selectivity of the sampled sounds. But above all, what is important is that the sampling can also be done dynamically, that is to say by operating on the basis of one or more of the various parameters considered above, depending on the current running conditions of the vehicle. In fact, it is evident that in an urban stretch there will be a rather irregular running speed, with frequent stops and starts, variable speeds (remember that the maximum speed limit in the city is usually 50 km / h), changes of direction, interactions with other vehicles and whatnot. It therefore becomes difficult to select non-relevant events (ie false positives) from those concerning accidents, which are quite frequent in urban traffic. In other words, if you want to have reliable data acquisition in these situations, there are not many alternatives: either you adopt solutions with a high degree of approximation and which therefore contain many false positives, or you need to be able to rely on a flexible system that is able to adapt to the variability of the speed of an alley.

Avere la possibilità di operare una acquisizione dinamica dei dati, che faccia riferimento alla traccia audio campionata secondo uno o più dei parametri sopra menzionati, permette di avere una acquisizione affidabile ed efficace dei dati sull’andatura di un veicolo. Having the ability to perform a dynamic data acquisition, which refers to the sampled audio track according to one or more of the parameters mentioned above, allows for a reliable and effective acquisition of data on the pace of a vehicle.

Si pensi per esempio al caso in cui il veicolo sia fermo ad un semaforo con le ruote ferme ed il motore in marcia: il rumore delle ruote sarà nullo mentre si avrà quello del motore che gira al minimo, ed eventualmente quello delle voci all’interno dell’abitacolo ed i rumori del traffico esterno. Consider, for example, the case in which the vehicle is stopped at a traffic light with the wheels stopped and the engine running: the noise of the wheels will be zero while the noise of the engine running at idle will occur, and possibly that of the voices inside. passenger compartment and outside traffic noises.

In queste condizioni il sistema dell’invenzione permette la campionatura della traccia audio sfruttando frequenze che siano diverse da quelle del rotolamento dei pneumatici. In these conditions, the system of the invention allows the sampling of the audio track using frequencies that are different from those of the rolling of the tires.

Se in una tale situazione il veicolo venisse tamponato da un altro, questo evento sarebbe facilmente rilevabile con il metodo dell’invenzione che sfrutta la traccia audio, in quanto il rumore anomalo che causerebbe l’urto conseguente al tamponamento, darebbe avvio alla procedura di salvataggio dei dati video relativi ai momenti precedenti e successivi all’impatto, di cui si è già detto sopra. If in such a situation the vehicle were hit by another one, this event would be easily detectable with the method of the invention that uses the audio track, as the anomalous noise that would cause the collision resulting from the rear-end collision, would start the rescue procedure. video data relating to the moments before and after the impact, which has already been mentioned above.

La cosa non è invece possibile, o comunque non avrebbe lo stesso grado di precisione ed affidabilità, con i sistemi noti nella tecnica, quali ad esempio quello della domanda di brevetto US 2003/028298 od altri basati solo sulla analisi di dati telemetrici e/o accelerometrici. However, this is not possible, or in any case it would not have the same degree of precision and reliability, with the systems known in the art, such as for example that of the patent application US 2003/028298 or others based only on the analysis of telemetry data and / or accelerometers.

In questi casi, infatti, la condizione di arresto del veicolo impedisce al sistema di avere informazioni sufficienti per stabilire se un determinato evento è riconducibile ad un sinistro stradale oppure ad altra causa (es. la chiusura di una portiera). In these cases, in fact, the stopping condition of the vehicle prevents the system from having sufficient information to establish whether a certain event is attributable to a road accident or to another cause (eg closing a door).

Ma gli effetti vantaggiosi conseguiti dal metodo dell’invenzione, di cui uno degli insegnamenti principali è quello di acquisire ed analizzare i dati audio relativi alle immagini stradali, si estendono anche alla successiva validazione delle immagini così acquisite. But the advantageous effects achieved by the method of the invention, of which one of the main teachings is to acquire and analyze the audio data relating to road images, also extend to the subsequent validation of the images thus acquired.

Infatti, come spiegato, le immagini riprese dal telefono mobile 10 vengono trasmesse a distanza dallo stesso telefono ad un centro di controllo 20 attraverso la rete di telecomunicazioni, per essere poi elaborate ed archiviate; il centro di controllo 20 può essere presso una assicurazione, oppure un qualunque altro soggetto (pubblico o privato) preposto alla validazione delle immagini. In fact, as explained, the images taken by the mobile telephone 10 are remotely transmitted by the same telephone to a control center 20 via the telecommunications network, to be then processed and stored; the control center 20 can be at an insurance company, or any other subject (public or private) in charge of validating the images.

La possibilità di avere una traccia audio relativa ai suoni, oltre che alle immagini video di un sinistro, consentono di eseguire delle verifiche sulla integrità di queste ultime, in modo relativamente rapido ed affidabile. The possibility of having an audio track relating to the sounds, as well as to the video images of a claim, allow to carry out checks on the integrity of the latter in a relatively quick and reliable way.

Infatti l’analisi spettrale dei suoni tramite campionatura di cui si è detto sopra, può essere replicata anche a livello di verifica e validazione delle immagini. In fact, the spectral analysis of sounds through sampling mentioned above can also be replicated at the level of image verification and validation.

In particolare, ciò può essere fatto mettendo a confronto queste ultime con l’andamento nel tempo di ciascuna delle componenti campionate del suono, come il rumore del motore, quello di rotolamento dei pneumatici, le voci nell’abitacolo, l’innesco dei dispositivi gonfiabili di protezione e quant’altro. In particular, this can be done by comparing the latter with the trend over time of each of the sampled sound components, such as the noise of the engine, that of the rolling of the tires, the voices in the passenger compartment, the triggering of the inflatable devices. protection and so on.

Eventuali anomalie nei tracciati (grafici) di campionatura quali interruzioni, discontinuità, variazioni e quant’altro, che non corrispondano al contenuto delle immagini, potrà essere facilmente individuato. Any anomalies in the sampling (graphic) traces such as interruptions, discontinuities, variations and so on, which do not correspond to the content of the images, can be easily identified.

Di conseguenza, in simili circostanze le immagini potranno essere invalidate dalla rilevazione di anomalie nella traccia audio; si attira l’attenzione sul fatto che anche manomissioni della traccia audio possono essere detettate con gli stessi principi. Consequently, in such circumstances the images may be invalidated by the detection of anomalies in the audio track; attention is drawn to the fact that tampering with the audio track can also be detected with the same principles.

Infatti, la campionatura dei suoni associati ai vari rumori di cui si è detto sopra durante la marcia del veicolo, permette di individuare anomalie causate da tagli e/o modifiche fatte sul filmato e/o sulla traccia audio. In fact, the sampling of the sounds associated with the various noises mentioned above while the vehicle is running, allows to identify anomalies caused by cuts and / or modifications made on the video and / or on the audio track.

Ad esempio, il taglio o l’eliminazione di parti della traccia audio crea delle alterazioni nelle campionature dei vari suoni, che quindi non collimano più e sono pertanto rilevabili. For example, cutting or deleting parts of the audio track creates alterations in the samples of the various sounds, which therefore no longer coincide and are therefore detectable.

Ciò a maggior ragione nel caso in cui la traccia audio e quella video siano crittografate quando vengono trasmesse dal telefono mobile 10. This is even more so if the audio and video tracks are encrypted when they are transmitted from the mobile phone 10.

E’ appena il caso di segnalare che queste verifiche possono essere svolte in maniera rapida ed affidabile con elaboratori elettronici (computer) dotati di capacità di calcolo e programmai (software) adeguati, che le persone esperte del ramo sono in grado di predisporre e/o adattare senza particolari difficoltà (esistono già e sono commercialmente disponibili programmi per l’analisi dei suoni e delle tracce audio digitali). It is hardly necessary to point out that these checks can be carried out quickly and reliably with electronic processors (computers) equipped with adequate calculation capabilities and programs (software), which experts in the field are able to prepare and / or adapt without particular difficulties (programs for the analysis of sounds and digital audio tracks already exist and are commercially available).

Peraltro, ciò rende possibile applicare l’invenzione anche su grande scala, come ad esempio per i numerosi clienti delle assicurazioni automobilistiche. Moreover, this makes it possible to apply the invention also on a large scale, such as for the numerous customers of car insurance.

La figura 6 riporta un diagramma di flusso delle fasi operative svolte per validare le immagini di sinistri stradali, secondo quanto appena spiegato. Figure 6 shows a flow chart of the operational phases carried out to validate the images of road accidents, as explained above.

Come si può constatare, la validazione delle immagini prevede alcune fasi operative sequenziali come la ricezione dei dati audio e/o video, la loro decrittazione qualora i dati siano cifrati, l’analisi dei suoni con la campionatura della traccia audio, l’analisi delle immagini con la campionatura della traccia video per la rilevazione di anomalie, la comparazione dell’analisi dei suoni con quella delle immagini in modo da rilevare eventuali discordanze o incongruenze. As it can be seen, the validation of the images involves some sequential operational phases such as the reception of audio and / or video data, their decryption if the data is encrypted, the analysis of sounds with the sampling of the audio track, the analysis of the images with the sampling of the video track for the detection of anomalies, the comparison of the analysis of the sounds with that of the images in order to detect any discrepancies or inconsistencies.

Tali analisi possono essere svolte sia su dati provenienti da una medesima fonte, come il dispositivo o telefono mobile 10, sia da fonti differenti come ad esempio le immagini acquisite dalle telecamere di bordo di un veicolo ed i suoni registrati nel corso di una telefonata fatta in tale veicolo, oppure immagini di videosorveglianza fornite da telecamere T esterne come quelle che sono agli incroci, agli attraversamenti pedonali o sugli edifici ed altre registrazioni sonore. These analyzes can be carried out both on data coming from the same source, such as the device or mobile phone 10, and from different sources such as the images acquired by the on-board cameras of a vehicle and the sounds recorded during a telephone call made in such vehicle, or video surveillance images provided by external T cameras such as those at intersections, pedestrian crossings or buildings and other sound recordings.

Pertanto, il metodo dell’invenzione risulta operativamente flessibile e si presta ad essere applicato non solo su dati comprendenti una traccia video e audio acquisite da una medesima fonte (come i dati acquisiti con il telefono mobile 10 dell’esempio descritto), ma anche quelli acquisiti da fonti diverse. Therefore, the method of the invention is operationally flexible and lends itself to be applied not only on data comprising a video and audio track acquired from the same source (such as the data acquired with the mobile phone 10 of the example described), but also those acquired from different sources.

L’analisi dei dati che viene svolta per stabilire se una traccia video sia stata modificata o meno, si basa su uno o più procedimenti iterativi; infatti, per accertare l’autenticità di immagini conviene eseguire delle verifiche incrociate sui dati e/o sulle informazioni che sono associate ad esse. The data analysis that is carried out to determine whether a video track has been modified or not, is based on one or more iterative procedures; in fact, to ascertain the authenticity of images, it is advisable to cross-check the data and / or information associated with them.

Una prima possibile opzione si basa sulla tipologia di sensore video che ha acquisito le immagini; infatti, la tipologia di sensore video permette di conoscere la sua risposta ai colori e/o alla luce, così da permettere di capire se il video è stato effettivamente acquisito da quel tipo di sensore oppure se è stato successivamente alterato. Più nel dettaglio, le fasi operative del metodo di analisi delle immagini svolte presso il centro di controllo 20, possono comprendere quella di determinare preliminarmente il tipo di sensore con cui sono state acquisite le immagini, desumendola dai metadati compresi nella traccia (o file) video oppure richiedendoli direttamente a chi ha effettuato le riprese. A first possible option is based on the type of video sensor that acquired the images; in fact, the type of video sensor allows you to know its response to colors and / or light, so as to allow you to understand if the video was actually acquired by that type of sensor or if it was subsequently altered. More specifically, the operational phases of the image analysis method carried out at the control center 20 may include that of preliminary determining the type of sensor with which the images were acquired, deducing it from the metadata included in the video track (or file) or by requesting them directly from whoever shot them.

Successivamente si esegue una campionatura dei dati, sulla base dei medesimi principi (trasformata di Fourier) sopra descritti in relazione alla traccia audio, con le modifiche ed adattamenti del caso per elaborare dati relativi ad immagini video (e non a suoni). Subsequently, a sampling of the data is carried out, on the basis of the same principles (Fourier transform) described above in relation to the audio track, with the necessary modifications and adaptations to process data relating to video images (and not to sounds).

Pertanto, in accordo con una possibile forma realizzativa, con il campionamento delle immagini si determina un insieme di valori di possibile uscita che i punti o pixel di un’immagine possono assumere quando detta immagine è acquisita da un sensore del tipo definito, perché ciascun tipo di sensore video opera in sostanza anche come un filtro per alcune bande di lunghezza d’onda: esso non fornisce quindi tutto lo spettro di lunghezze d’onda, ma solo alcune. Dopo di ciò si ricercano nella traccia video valori di intensità luminosa e/o cromatica dei punti (pixel) delle immagini, che non sono coerenti con l’insieme di valori di possibile uscita: se si rileva un numero di punti significativo in cui tali valori di intensità luminosa e/o cromatica rilevati non sono coerenti con quelli degli altri punti o degli altri fotogrammi (c.d. frame) che costituiscono la traccia video, allora ciò è indice di una anomalia e di una possibile alterazione. Therefore, in accordance with a possible embodiment, the sampling of the images determines a set of possible output values that the points or pixels of an image can assume when said image is acquired by a sensor of the defined type, because each type In essence, the video sensor also operates as a filter for some wavelength bands: it therefore does not provide the whole spectrum of wavelengths, but only some. After this, the video trace is searched for luminous and / or chromatic intensity values of the points (pixels) of the images, which are not coherent with the set of possible output values: if a significant number of points is detected in which these values of light intensity and / or color detected are not consistent with those of the other points or other frames (so-called frames) that make up the video track, so this is an indication of an anomaly and a possible alteration.

Questo insieme di caratteristiche rende vantaggiosamente possibile rilevare i contenuti video che sono stati modificati utilizzando un software di foto/video ritocco, poiché gli strumenti che questi programmi (software) mettono a disposizione generano dei cambiamenti che restano nell’immagine oppure in almeno uno dei fotogrammi (nel caso di contenuti video digitali, essi sono costituiti da sequenze di fotogrammi acquisiti con frequenze di frazioni di secondo). This set of features makes it possible to advantageously detect the video contents that have been modified using a photo / video retouching software, since the tools that these programs (software) make available generate changes that remain in the image or in at least one of the frames. (in the case of digital video contents, they consist of sequences of frames acquired with frequencies of fractions of a second).

Con questa analisi si riesce ad avere vantaggiosamente la possibilità di rilevare alterazioni, manomissioni, danneggiamenti e simili, nelle tracce video acquisite. With this analysis it is possible to advantageously have the possibility of detecting alterations, tampering, damage and the like in the acquired video tracks.

L’efficacia di questa analisi è notevolmente incrementata se si effettua anche una verifica incrociata con quella della traccia audio, di cui si è detto sopra. The effectiveness of this analysis is significantly increased if a cross-check is also carried out with that of the audio track, as mentioned above.

In altri termini, mettendo a confronto le risultanze delle campionature della traccia audio con quelle della traccia video relativamente ad un medesimo evento, si può ottenere una disamina completa che consenta di avere un quadro attendibile sulla autenticità dei dati acquisiti. In other words, by comparing the results of the samples of the audio track with those of the video track relative to the same event, it is possible to obtain a complete examination that allows to have a reliable picture of the authenticity of the acquired data.

Ciò permette quindi di eseguire una validazione delle immagini acquisite, in modo efficace e attuabile con elaboratori elettronici (computer, server, ecc.), programmi (software) ed altri strumenti informatici, così da poter fare fronte anche a grandi quantitativi di richieste cioè di immagini acquisite sulle reti stradali ed autostradali, trasmesse al centro di controllo 20. This allows therefore to perform a validation of the acquired images, in an effective and feasible way with electronic processors (computers, servers, etc.), programs (software) and other IT tools, so as to be able to cope even with large quantities of requests, i.e. images acquired on the road and motorway networks, transmitted to the control center 20.

Sono comunque possibili varianti per l’attuazione del trovato rispetto a quanto descritto sopra. However, variants are possible for the implementation of the invention with respect to what is described above.

Una di esse è mostrata nella figura 7, che illustra la soluzione accennata in precedenza nella quale le immagini video sono acquisite dalle telecamere 210 incorporate nel veicolo, come è ormai diffuso in molti modelli di automobili, separatamente dalla traccia audio che può essere ottenuta da almeno un microfono 220 all’interno dell’abitacolo, oppure anche da un telefono cellulare o simili. One of them is shown in Figure 7, which illustrates the previously mentioned solution in which video images are acquired by the cameras 210 incorporated in the vehicle, as is now widespread in many car models, separately from the audio track which can be obtained from at least a microphone 220 inside the passenger compartment, or even from a mobile phone or the like.

Sia le videocamere 210 che il/i microfono/i 220 sono collegati operativamente ad un elaboratore o computer di bordo 215, preferibilmente associato al veicolo 211 in quanto destinato a svolgere anche altre funzioni relative al funzionamento dell’automobile, come la gestione del propulsore (es. iniezione elettronica del carburante, raffreddamento cilindri, cambio marce automatico o sequenziale, ecc.), della trazione (anteriore, posteriore, integrale, elettrica nei veicoli ibridi), il controllo dei fluidi di servizio (liquido raffreddamento motore, olio freni), dei servocomandi (sterzo, freni), della climatizzazione dell’abitacolo, la navigazione e quant’altro. Both the video cameras 210 and the microphone / s 220 are operationally connected to an on-board computer or computer 215, preferably associated with the vehicle 211 as it is also intended to perform other functions relating to the operation of the car, such as managing the engine ( e.g. electronic fuel injection, cylinder cooling, automatic or sequential gear change, etc.), traction (front, rear, integral, electric in hybrid vehicles), control of service fluids (engine coolant, brake oil), servos (steering, brakes), passenger compartment climate control, navigation and so on.

Il computer di bordo 215 è dotato anche di memorie 212, 213 per il salvataggio dei dati acquisiti dalle telecamere 210 e dal microfono 220, secondo quanto già spiegato per l’esempio precedente a cui si rimanda per brevità. The on-board computer 215 is also equipped with memories 212, 213 for saving the data acquired by the cameras 210 and the microphone 220, as already explained for the previous example to which we refer for the sake of brevity.

E’ solo il caso di segnalare come preferibilmente l’automobile 211 sia dotata di un sistema di telecomunicazioni 201, per il collegamento alla rete TLC e l’invio delle tracce audio e video acquisite, al centro di controllo 20. It is only necessary to point out how preferably the car 211 is equipped with a telecommunications system 201, for connection to the TLC network and sending the acquired audio and video tracks, to the control center 20.

Tuttavia ciò potrebbe anche non essere necessario, in quanto l’automobile 211 e/o il suo computer di bordo 215 potrebbero essere dotati di una memoria 213 per la conservazione dei dati audio-video salvati, i quali sono poi scaricati tramite un sistema fisico quale un cavo USB, Wi-Fi o altro. However, this may also not be necessary, as the car 211 and / or its on-board computer 215 could be equipped with a memory 213 for storing the saved audio-video data, which are then downloaded via a physical system such as a USB cable, Wi-Fi or other.

In particolare, tale memoria 213 potrebbe essere allocata in un dispositivo del tipo “scatola nera” installato sul veicolo, protetto contro manomissioni. In particular, this memory 213 could be allocated in a “black box” type device installed on the vehicle, protected against tampering.

Alcune delle possibili varianti dell’invenzione sono state qui descritte, ma è chiaro alle persone esperte del ramo che per la sua attuazione pratica sono possibili anche altre forme di realizzazione, in cui diversi degli elementi qui descritto, possono essere sostituiti da altri tecnicamente equivalenti. Some of the possible variants of the invention have been described here, but it is clear to those skilled in the art that for its practical implementation other embodiments are also possible, in which several of the elements described here can be replaced by other technically equivalent ones.

La presente invenzione non è dunque limitata agli esempi illustrativi considerati, ma è suscettibile di varie modifiche, perfezionamenti, sostituzioni di parti e di elementi equivalenti senza comportare scostamenti dall’idea inventiva di base, come specificato nelle seguenti rivendicazioni. The present invention is therefore not limited to the illustrative examples considered, but is susceptible to various modifications, improvements, replacements of parts and equivalent elements without involving deviations from the basic inventive idea, as specified in the following claims.

A tale riguardo, ricollegandosi a quanto premesso inizialmente, sebbene l’invenzione sia principalmente focalizzata su filmati di immagini acquisiti con videocamere, telecamere, fotocamere, fisse o mobili, i principi qui esposti possono essere estesi anche ad immagini ottenute con raggi infrarossi, radar e simili cioè radiazioni non visibili all’occhio umano, oppure immagini ecografiche o comunque rilevazioni acustiche effettuate con vibrazioni e/o onde ultrasoniche. In this regard, referring back to what was initially stated, although the invention is mainly focused on video footage of images acquired with video cameras, video cameras, fixed or mobile cameras, the principles set out here can also be extended to images obtained with infrared rays, radar and similar radiation that is not visible to the human eye, or ultrasound images or in any case acoustic measurements made with vibrations and / or ultrasonic waves.

Questa ed altre possibili varianti rientrano comunque nell’ambito delle rivendicazioni che seguono. This and other possible variants however fall within the scope of the following claims.

Claims

CLAIMS 1. Method for capturing video images relating to an event such as a road accident and the like, comprising the steps of: - capture a stream of video images, - save the images acquired in a predetermined time interval, before and after the event; characterized in that it comprises the step of also acquiring an audio stream of sounds associated with the images, and in which the step of saving the images is carried out as a function of sounds detected in correspondence with said event, and / or accelerometric variations.

2. Method according to claim 1, also comprising a step for saving the data of the audio stream relating to said time interval.

Method according to claims 1 or 2, in which the step of saving the images is carried out following variations in the sounds and / or noises and / or vibrations acquired with the audio stream.

4. Method according to claims 1, 2 or 3, comprising a sampling phase of the sounds of the acquired audio stream, to determine the occurrence of an event.

Method according to claim 4, wherein the sound sampling step comprises a Fourier type analysis (FT, FFT, DTFT, STFT), while the occurrence of an event is determined in relation to variations of at least one of frequency, amplitude, timbre, loudness or vibrational level of the sampled sounds.

Method according to any one of the preceding claims, wherein the audio and / or video streams are acquired on board a vehicle (11; 211).

Method according to any one of the preceding claims, comprising a step for detecting the telemetry and / or accelerometric data of a vehicle (11; 211).

8. Method according to any of the preceding claims, in which the sounds associated with the images include the background noise inside the passenger compartment of a vehicle (11; 211).

Method according to any one of the preceding claims, in which the saved images relating to an event are remotely transmitted to a control center (20) for their validation.

10. Method for validating images relating to an event, preferably acquired with the method according to any one of the preceding claims, characterized by the fact of comprising a phase for sampling the sounds and a phase for comparing the trends over time of the sampled components of the sound .

11. Validation method according to claim 10, comprising a comparative analysis step of the sampled components of the sound and images, for detecting any discrepancies or inconsistencies between the audio and video tracks, relating to the acquired images and sounds.

12. Validation method according to claims 9 or 10, comprising a sampling step of the images for detecting anomalies in the video track relating thereto.

13. Apparatus for implementing the method according to any of claims 1 to 13, comprising a mobile device (10) in which there is at least one data processing unit (110; 215); transmission elements (111; 201) for transmitting data remotely via a telecommunications network (TLC); a first memory (112) containing at least one data acquisition program implemented at least in part by the processing unit (110; 215); a second memory (113) for saving audio and video data relating to an event; a video camera (101; 210) for image acquisition; a microphone (102; 220) for the acquisition of sounds; characterized by the fact that the processing unit (110; 215) is designed to perform a sampling of the acquired sounds.

14. Apparatus according to claim 13, in which the data processing unit (110; 215) is arranged to save the video and audio data relating to an event for which predetermined variations of at least one of frequency, amplitude occur , timbre, sound or vibration level of the sampled sounds.

15. Apparatus according to claims 13 or 14, comprising a mobile device (10; 215) suitable for sampling sounds, such as a cellular telephone (10) or a processor (215) applied on board a motor vehicle (11).

16. Computer product that can be loaded into the memory of an electronic computer, comprising a portion of software code for carrying out the steps of the method according to any one of claims 1 to 13.