NO334902B1 - System og fremgangsmåte for overvåking av minst ett observasjonsområde - Google Patents

System og fremgangsmåte for overvåking av minst ett observasjonsområde Download PDF

Info

Publication number
NO334902B1
NO334902B1 NO20121477A NO20121477A NO334902B1 NO 334902 B1 NO334902 B1 NO 334902B1 NO 20121477 A NO20121477 A NO 20121477A NO 20121477 A NO20121477 A NO 20121477A NO 334902 B1 NO334902 B1 NO 334902B1
Authority
NO
Norway
Prior art keywords
camera
area
monitoring
platform
real
Prior art date
Application number
NO20121477A
Other languages
English (en)
Other versions
NO20121477A1 (no
Inventor
Jan Ove Larsen
Magne Norland
Kjell Arne Hellum
Jørn Are Henriksen
Glenn Levi Nilssen
Roar Johnsen
Steinar Lind
Øyvind Overrein
Vegard Almås
Per Inge Jensen
Claus Fritzner
Bjørn Olav Bakka
Eirik Joakim Steinli
Thor Christian Helgerud
Original Assignee
Kongsberg Defence & Aerospace As
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kongsberg Defence & Aerospace As filed Critical Kongsberg Defence & Aerospace As
Priority to NO20121477A priority Critical patent/NO334902B1/no
Priority to US14/096,192 priority patent/US9762864B2/en
Publication of NO20121477A1 publication Critical patent/NO20121477A1/no
Publication of NO334902B1 publication Critical patent/NO334902B1/no

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19641Multiple cameras having overlapping views on a single scene
    • G08B13/19643Multiple cameras having overlapping views on a single scene wherein the cameras play different roles, e.g. different resolution, different camera type, master-slave camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/19626Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
    • G08B13/19628Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses of wide angled cameras and camera groups, e.g. omni-directional cameras, fish eye, single units having multiple cameras achieving a wide angle view
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19691Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound
    • G08B13/19693Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound using multiple video sources viewed on a single or compound screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

System for overvåking av minst ett observasjonsområde omfattende minst ett kamera for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera er anordnet på en roterende plattform i det minst ene området som skal overvåkes; minst ett videokamera for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform i det minst ene området som skal overvåkes; prosesseringsinnretning signalforbundet til nevnte kamera og nevnte videokamera for innsamling, prosessering og samordning av signaler.

Description

System og fremgangsmåte for overvåking av minst ett observasjonsområde
Introduksjon
Den foreliggende oppfinnelsen omfatter et system og en fremgangsmåte for overvåkning av minst ett observasjonsområde. Mer spesifikt beskrives et system og en fremgangsmåte for forbedret overvåkning ved å kombinere panoramabilder med sanntidsvideo fra observasjonsområdet som skal overvåkes.
Bakgrunn for oppfinnelsen
Ulike fremgangsmåter og systemer for overvåking og deteksjon av ulike hendelser er velkjent. Dette innbefatter bruk av ulike typer kamerasystemet for å fange inn visuell informasjon fra et område som skal overvåkes.
Bruk av linjeskanner for å frembringe et panoramabilde er i seg selv velkjent. Det samme er bruk at et panorerende og tiltende styrt videokamera.
De fleste eksisterende overvåkningsanlegg utnytter informasjonen fra forskjellige kamerasystemer hver for seg i operasjonsrommene. Dette krever normalt bruk av flere operatører eller at én operatør flytter seg eller blikket rundt til de forskjellige framvisningssystemene for å oppdatere sin situasjonsoversikt.
Det finnes imidlertid systemer som samordner signaler fra flere kameraenheter.
Et eksempel på dette er US-2012098927 Al som beskriver et system for videoovervåking av et område, hvor systemet omfatter et hus som kan rotere, et sanntids panorerende, tiltende zoom-kamera (PTZ-kamera) som har montert et panoramakamera på det samme huset som PTZ kameraet, og hvor en prosesseringsenhet er signalforbundet med de nevnte kameraer for innsamling, prosessering og samordning av signaler. Sammenstillingen er imidlertid slik at høy oppløsning og nøyaktighet i panoramabildet ikke er mulig.
US-2008117294 Al beskriver en overvåkingsinnretning som bruker et linjeskannende kamera på en roterende plattform for å danne et panoramabilde med høy oppløsning. Etterfølgende panoramabilder sammenliknes med hverandre for å detektere endringer i bildet.
Det fordelaktige ved den foreliggende oppfinnelsen er kombinasjonen med bruk av ulike kamerateknologier med ulik sammenstilling og plassering samt innsamling, prosessering og samordning av signaler fra disse.
Oppfinnelsen er ny og oppfinnerisk ved at den muliggjør bruk av simultan tilgang på tilgjengelig data fra forskjellige kamerasystemer og sensorer. Datapresentasjon kan dermed realiseres på kun én framvisningsenhet. Dette forenkler hverdagen vesentlig for hver operatør og antallet operatører kan dermed i de fleste tilfeller reduseres.
Oppfinnelsen realiserer et fleksibelt system for overvåking og som muliggjør svært realistisk visuell presentasjon av et eller flere observasjonsområder selv om tilgjengelig båndbredde for overføring av data med informasjon er begrenset.
Anvendelsesområdet til oppfinnelsen er mangfoldig og omfatter, men er ikke begrenset til stasjonære og mobile luft-, sjø- og landbaserte lokasjoner, eksempelvis montert på helikopter, skip og landgående kjøretøy, for havneovervåkning, Air Traffic Control, baseovervåkning, grenseovervåkning, oljeplattformer, video-konferanser og andre steder hvor man ønsker en følelse av tilstedeværelse ved en lokasjon selv om en befinner seg ved en fjerntliggende lokasjon. Typen bruk av oppfinnelsen kan innebefatte overvåkning, kontroll, observasjon, simulering og opplæring.
Det at en operatør kan betjene ett eller flere observasjonsområder fra et fjerntliggende sted i en kjent og trygg omgivelse bidrar til økt kvalitet og sikkerhet på operatørens arbeid.
Kort beskrivelse av oppfinnelsen
Den foreliggende oppfinnelsen omfatter et system for overvåking av minst ett observasj onsområde.
Systemet omfatter minst ett kamera for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera er anordnet på en roterende plattform i det minst ene området som skal overvåkes og hvor den den roterende plattformen omfatter en rotasjonsuavhengig overføring i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet.
Videre omfatter systemet minst ett kamera for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform i det minst ene området som skal overvåkes.
En prosesseringsinnretning er videre signalforbundet til nevnte kameraer for innsamling, prosessering og samordning av signaler.
Ytterligere trekk ved systemet er beskrevet i de vedlagte uselvstendige kravene.
Oppfinnelsen omfatter også en fremgangsmåte for overvåking av minst ett observasjonsområde slik som definert i det vedlagte kravsettet.
Detaljert beskrivelse av oppfinnelsen
Oppfinnelsen vil nå bli nærmere beskrevet med henvisning til figurer hvor:
Figur 1 viser en oversikt over systemet omfattet av oppfinnelsen;
Figur 2 viser detaljer kontroll- og overvåkingsinnretningen, og
Figur 3 viser et eksempel på en lokasjon hvor overvåking styres fra.
Figur 1 viser en oversikt over de delene som inngår i systemet 100 for overvåking i henhold til oppfinnelsen. Systemet 100 kan betegnes som et hybrid overvåkings-system siden det omfatter ulike kameraløsninger hvor en type kameraer er anordnet på en roterende plattform 120, mens en annen type kameraer er anordnet på en stasjonær plattform 140. Data fra de ulike typene kameraer blir samlet inn, prosessert og samordnet ved hjelp av en prosesseringsinnretning 150.
I det videre beskrives for enkelhetsskyld primært bruk av kun ett kamera plassert på hver av henholdsvis roterende og stasjonær plattform 120, 140. Videre blir ett observasjonsområde beskrevet selv om systemet 100 kan håndtere flere observasjonsområder.
Et første kamera 110 for å frambringe panoramabilder av et observasjonsområde er anordnet på en roterende plattform 120 i området som skal overvåkes.
I henhold til én utførelse av oppfinnelsen er det første kameraet 110 som frambringer panoramabilder et vertikalt linje-skannende kamera med tilhørende optikk og utlesningselektronikk montert på den roterende plattformen 120. Ved en full rotasjon av den roterende plattformen 120 vil dette kameraet fange opp et 360-graders panoramabilde. Linjeskannerteknologi kan gi uniform farge/sorthvitt gjengivelse med oppløsning tilsvarende det menneskelige øyet, dvs. 0,2 - 0,3mrad, noe som er å foretrekke i mange av anvendelsesområdene.
Linjeskannere som brukes i systemet 100 kan være av lik type eller basert på ulik teknologi og monteres på plattformen med en vinkelavstand avhengig av funksjon. Den kan videre være tiltbar for dekning av full hemisfære i observasjonsområdet.
Bildesensoren i en linjeskanner er en samling av vertikale sensorstriper som samler, for eksempel, men ikke avgrenset til, synlig lys, i spektralbånd (farger) og/eller IR og/eller UV.
Linje-skanning kan realiseres ved at sensorpikselmatrisen prosesseres sammen til en vertikal linje med piksler for å forbedre signal/støy forholdet. Teknikken heter TDI (Time Delay Integration). Ved å sette inn et filter eller et prisme som splitter lyset i flere spektralbånd (dvs. farger) og ha en TDI stripe per spektralbånd kan hvert enkelt spektralbånd detekteres. Med denne teknikken kan et fargekamera for RGB enkelt realiseres med økt lysfølsomhet. Dette vil igjen tillate økt skannehastighet.
En egnet kombinasjon av de ulike sensortypene vil sørge for best mulig bevisstgjøring og situasjonsoversikt over et observasjonsområde både natt og dag samt under forhold med nedsatt sikt som følge av eksempelvis tåke eller støv. En scene fra et observasjonsområde kan gjengis i sort/hvitt eller farger.
I parallell med den nevnte linjeskannende bildesensoren er det i en utførelse av oppfinnelsen et roterende laseremitterende og laserskannende sensorsystem som generer et 3D-avstandsbilde av området som overvåkes.
I kombinasjon med det nevnte linje-skannende kamera opererer minimum et andre kamera 130 som er anordnet på en stasjonær plattform 140 for å frambringe sanntidsvideo. Dette er PTZ-kamera. Det vil si at retning og utsnitt av sanntidsvideo som skal framvises styres av PTZ instruksjoner. For å gi kameraet denne funksjonen kan den stasjonære plattformen utgjøres av en to-akset plattform som styres med PTZ instruksjoner for å gi et påmontert kamera nevnte pan-tilt funksjon. Alternativt kan selve kamerahuset som brukes ha disse funksjonene innebygd. Kameraer sender sanntidsvideo av et utsnitt av det nevnte 360-graders panorama- stillbilde som er aktivt.
I en utførelse kan videosignalet fra PTZ-kameraet vises i et eget framvisningssystem eller som et bilde innfelt i nevnte 360-graders panoramabilde, dvs. med bilde-i-bilde funksjonalitet (PIP). Oppløsningen til PTZ-kameraet som benyttes er fortrinnsvis tilsvarende den som det nevnte linje-skannende kameraet operer med. Om ønskelig kan en større del av scenen vises med sanntidsvideo på bekostning av video-signalets oppløsning. Ett PTZ-kamera kan også være sammensatt av flere stirrende kameraer som er opp-linjert seg i mellom. På denne måten kan en større sektor av panoramabildet presenteres som sanntidsvideo uten redusert oppløsning.
I en utførelse er det anordnet en avstandsmåler med sikteakse parallell med optisk akse til det andre kameraet 130 som frambringer sanntidsvideo.
Det andre kameraet 130 som benyttes til frambringing av sanntidsvideo kan, tilsvarende kameraet som frambringer panoramabilder, ha bildesensorer som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
Kameraene og sensorsammenstillingen som er plassert i ett eller flere observasjonsområder er tilpasset for å kunne operere under alle miljøer slik at de tåler ulike forhold med hensyn til bl.a. temperatur, vind, støv, nedbør og annet som kan nedsette sensorsammenstillingens ytelse.
Systemet 100 kan ytterligere omfatte sensorer for monitorering av ulike omgivelsesparametere. Slike er da anordnet på den stasjonære plattformen 140.
I en utførelse omfatter systemet 100 ytterligere en samling mikrofoner anordnet på den stasjonære delen 140, og hvor disse er forbundet til nevnte prosesseringsinnretning 150 slik at sanntidsvideo fra området som skal vises kan baseres på retningen til registrert lyd. Lydbildet fra scenen kan også gjengis for operatøren synkront med bildet for økt situasjonsforståelse. Dette signalet presenteres for operatøren via et antall høyttalere 176 slik at lyd og bilde fra scenen gjenskapes med samme forhold som ved opptaksstedet.
Systemet 100 kan ytterligere omfatte et radarsystem som er anordnet på nevnte stasjonære del 140 for å identifisere objekter, deres posisjon og hastighet, 100 når sikten og visuell informasjon er dårlig. Radarsystemet kan også monteres på roterende del, hvor det er synkronisert med panoramabildene.
Den roterende plattformen 120 inneholder et posisjoneringssystem som sørger for gjengivelse av et komplett panoramabilde for hver rotasjon. Den roterende plattformen 120 omfatter videre en rotasjonsuavhengig overføring 125 i form av en kontakt eller trådløs slepering for fortløpende overføring av data fra det panorerende kameraet. Prosessering av innsamlede data kan skje i alle ledd av sammenstillingen for å redusere datamengden der det er behov for det.
Panoramabildene kan bli vist på et eksternt fremvisningssystem og vil oppdateres i takt med den roterende plattformens 120 rotasjonshastighet. Ny informasjon kan presenteres enten linjevis, seksjonsvis etter hvert som ny informasjon er innsamlet, eller ned mot en gang per runde hvor et helt nytt panoramabilde vises for operatøren 180.
Understellet som blir brukt til kameraene i observasjonsområdet er fortrinnsvis av en type som sørger for stabilitet for å generere stabile bilder under dynamiske forhold som opptrer under ulike anvendelsesområder. I en utførelse er derfor understellet en stabiliseringsplattform som den roterende plattformen 120 er forbundet til.
Når systemet 100 er operativt vil det generere store datamengder som må prosesseres og behandles før oversendelse til en lokasjon for fjernovervåking, som omfatter en kontroll- og overvåkingsinnretning 170 for styring av overvåkningssystemet samt fremvisning av data fra sensorene, eksempelvis panoramabilder og sanntidsvideo fra i det minst ene observasjonsområde.
For å sende overvåkings data omfatter systemet 100 en kommunikasjonsinnretning 160 forbundet til prosesseringsinnretningen slik at prosesserte samordnede signaler overføres til lokasjon for fjernovervåking av det minst ene observasjonsområdet.
Prosessering av data og bildebehandling kan innebefatte, men er ikke begrenset til, datakomprimering og bildedifferering. Reduksjon av utsendt datamengde kan oppnås ved kun å sende ny/endret informasjon i etterfølgende bilder. Graden av komprimering kan være tilpasset tilgjengelig båndbredde.
Informasjon sendes over et egnet kommunikasjonsmedium som eksempelvis, men ikke avgrenset til, dedikerte linjer (fiber, kobber), trådløst (WiFi, Internett, optisk) og hvor avstand er ubegrenset.
I en utførelse kan systemet 100 også omfatte lokal kommunikasjon via minst én akustisk eller optisk transduser.
Figur 2 viser detaljer ved kontroll og overvåkingsinnretningen 170 med et framvisningssystem 174 for overvåkingen befinner seg fortrinnsvis på en lokasjon hvor en operatør 180 kan styre systemet 100 i trygge omgivelser. Systemet 100 kan vise hele eller deler av det nevnte 360-graders bilde, med oppløsning til og med, men ikke avgrenset til den nevnte øye-oppløsningen. Dersom mindre sektorer vises kan man panorere i stillbildet via et brukergrensesnitt. Fremvisningssystemet kan bestå av, men er ikke avgrenset til varianter av monitorer, prosjektører for front-eller bak-projeksjon, OLED-tapet, display briller, et hjelm-montert display eller en form for kombinasjon av de nevnte. For en mer virkelighetstro presentasjon, presenteres bildet på en kuleformet, sømløs skjerm eller display.
Den delen av scenen som framvises i sanntids-video defineres av en operatør 180 gjennom en kommando gitt via et brukergrensesnitt. Dette kan, men er ikke begrenset til å være håndbevegelser, control-grip, øye-tracking, hode-tracking og/eller virtuell kikkert. Eksempel på sistnevnte kan være en håndholdt enhet med pekefunksjon og integrerte skjermer samt zoom/focus justering. Når operatøren 180 har et objekt av interesse i synsfeltet til et PTZ-kamera kan objektet trackes automatisk av nevnte PTZ-kamera og dersom sanntidsframvisning framvises som et innfelt bilde i panoramabilde vil nevnte innfelte bilde flytte seg med objektet av interesse relativt til panoramabildet. Dersom flere PTZ-kameraer er tilgjengelig kan flere objekter følges samtidig i sanntid. Operatøren 180 har også mulighet til å styre PTZ-kameraet til å følge en forutbestemt bane.
For å øke ytelsen til kameraet på roterende plattform kan ytterligere bildebehandling benyttes for å gjøre bruken enklere, øke observerbarheten eller gjøre bildet så identisk med en reell scene som mulig. Eksempler er kontrastforbedring, super-resolution, HDR-bilde-generering og bevegelses-deteksjon.
I tillegg til bilde-i-bilde funksjonalitet kan systemet 100 vise annen informasjon som en overlagring (overlay), i dedikerte vinduer, eller på egne framvisningssystemer. Eksempler på informasjon kan være temperatur og værdata, informasjon som innhentes av dedikerte sensorer montert på plattformen. Radarinformasjon kan også fusjoneres med panoramabildet eller presenteres på et eget framvisningssystem. Systemet 100 kan leveres med et tilpasset radarsystem, eksempelvis en doppler-radar, eller utnyttelse av eksisterende, tilgjengelige radar-systemer. Informasjon om kjente stasjonære eller bevegelige elementer i scenen kan også inkluderes i fremvisningssystemet.
Det registrerte lydsignalet kan presenteres for operatøren 180 via et antall høyttalere 176 slik at lyd og bilde fra scenen gjenskapes med samme forhold som ved opptaksstedet.
I tillegg til video og stillbilder kan systemet 100 gjøre kontinuerlige avstandsmålinger fra systemets 100 posisjon til et objekt av interesse. Avstanden presenteres i ønsket benevning som overlay eller i dedikerte vinduer. I parallell med kameraer på den roterende plattformen kan et lasersystem genere et 3D-avstandsbilde av scenen som overvåkes.
I en utførelse av systemet har operatøren 180 har mulighet til å kommunisere via mikrofoner 178 ved hjelp av lyd- og lyssignaler via sensorsystemet fra sin eksterne lokasjon. Den eksterne lokasjonen hvor kontroll- og overvåkingsinnretningen 170 befinner seg, innebefatter i en utførelse av oppfinnelsen også et sett akustiske transdusere, i tillegg til ett eller flere framvisningssystemer samt et nevnt brukergrensesnitt som betjenes via nevnte håndbevegelser og/eller et kontrollpanel. Benyttelsen av et standardisert brukergrensesnitt som tillater at operatøren 180 kan ha en form for opplæring for å betjene flere fjerntliggende overvåkningsposter.
Figur 3 viser et eksempel på en lokasjon hvor overvåking styres fra. I figuren vises et flertall display eller monitorer satt sammen i en krummet konfigurasjon foran en operatør 180 slik at observasjonsområdet som overvåkes dekker hele synsfeltet til operatøren 180. Figuren viser en synsvinkel på ca. 180°, men ved å bygge dette ut med flere monitorer vil 360° kunne realiseres.
I en annen utførelse kan den visuelle informasjonen fra et observasjonsområde framvises for en operatør 180 ved at han/hun er utstyrt med en hjelm med et påmontert display eller som bruker en displaybrille.
Framvisning av et eller flere observasjonsområder kan også gjøres på lerret eller liknende ved bruk av for- eller bak-projeksjon.
3D-framvisning kan også realiseres dersom det ved observasjonsområdet generes et 3D-avstandsbilde av scenen som overvåkes. Dersom to eller flere sensor-sammenstillinger er tilknyttet samme framvisningssystem, kan to-og-to signaler vises samtidig med ulik polarisering (samme teknologi som 3D-briller) hvor to operatører 180 har briller og headset som filtrerer ut den ene polariseringen. På denne måten kan to operatører 180 overvåke to steder samtidig fra samme kontrollrom, uten tap av synsfelt, oppløsning eller observasjonsevne. Ved å gå ned på oppløsning eller synsfelt kan to observasjonsposter framvises for en operatør 180 på det samme framvisningssystemet, enten over/under eller i hver sin sektor.
Fra sin lokasjon vil en operatør 180 kunne styre hva som ønskes framvist for nærmere iaktakelse ved ulike styringsmidler som f.eks. håndbevegelser, sporing av hode- og/eller øyeposisjon (head track, eye track), en trykkfølsom skjerm, virtuell kikkert, muntlige kommandoer og andre kjente styringsmidler.
Hva som framvises av sanntidsvideo ved hjelp av det nevnte minst ene andre kameraet 130 fra observasjonsområdet kan systemet styre helautomatisk basert på tolking av detekterte bevegelser, lyd og lys fra observasjonsområdet. En operatør 180 kan imidlertid overstyre en eller flere av disse og kan styre hele systemet manuelt basert på egne syns- og hørselsinntrykk.
Den foreliggende oppfinnelsen som over er beskrevet som et system 100 utgjøres også av en fremgangsmåte for overvåkning av minst ett observasjonsområde. Fremgangsmåte omfatter et flertall trinn, hvor det første trinnet er å frambringe panoramabilder av det nevnte minst ene området ved hjelp av minst et første kamera 110 som er anordnet på en roterende plattform 120 i det minst ene området som skal overvåkes.
Det andre trinnet er å frambringe sanntidsvideo fra det minst ene nevnte området ved hjelp av minst et andre kamera 130 som er anordnet på en stasjonær plattform 140 i det minst ene området som skal overvåkes, og
Det siste trinnet er å samle inn, prosessere og samordne mottatte signaler fra nevnte kameraer ved hjelp av en prosesseringsinnretning 150 som tilveiebringer prosesserte samordnede signaler.
Ytterligere trekk ved fremgangsmåten er beskrevet i kravsettet og betydningen av disse vil forstås i sammenheng med den detaljerte beskrivelsen av systemet.
Oppfinnelsen vil kunne erstatte og sentralisere flere ulike typer av overvåkning, kontroll, observasjon, søk, simulering og trening både til sjøs, i luften og på land, for sivile og militære anvendelser.
Eksempler på anvendelsesområder til sjøs er oljeplattformer og skipsmonterte implementeringer. Sistnevnte kan være cruise-skip, rørleggere, isbrytere og lignende.
Anvendelsesområder i luft kan f.eks. være implementeringer av oppfinnelsen i helikopter og droner eller bemannede fly, mens det på land kan være i forbindelse med kontroll av lufttrafikk, anti-terror, grenseoverganger, havneovervåkning, og søppeldyngeovervåkning.
Oppfinnelsen er også egnet implementert i forbindelse med videokonferanse eller turisme som f.eks. et 'World Wide Virtual Tourist Center' eller andre anvendelsesområder hvor tilstedeværelse fra en fjern lokasjon er ønskelig.

Claims (28)

1. System (100) for overvåking av minst ett observasjonsområde,karakterisert vedat det omfatter: a. minst et første kamera (110) for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera (110) er anordnet på en roterende plattform (120) i det minst ene området som skal overvåkes og hvor den den roterende plattformen (120) omfatter en rotasjonsuavhengig overføring (125) i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet (110); b. minst et andre kamera (130) for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform (140) i det minst ene området som skal overvåkes; c. prosesseringsinnretning (150) signalforbundet til nevnte kameraer (110, 130) for innsamling, prosessering og samordning av signaler.
2. System (100) i henhold til krav 1,karakterisert vedat det minst ene første kameraet (110) anordnet på den roterende plattformen (120) omfatter et linjeskannende kamera.
3. System (100) i henhold til krav 1,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) anvender TDI (Time Delay Integration).
4. System (100) i henhold til krav 1,karakterisert vedat det minst ene andre kameraet (130) for frambringing av sanntidsvideo har digitalt Pan/Tilt/Zoom (PTZ) funksjonalitet og hvor retning og utsnitt av sanntidsvideo som skal framvises styres av PTZ instruksjoner.
5. System (100) i henhold til et av de foregående kravene, karakterisert vedat kameraene (110, 130) har en bildesensor som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
6. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter en kommunikasjonsinnretning (160) forbundet til nevnte prosesseringsinnretning (150) for å overføre prosesserte samordnede signaler til en lokasjon for styring og overvåking av det minst ene observasjons området.
7. System (100) i henhold til krav 6,karakterisert vedat systemet (100) ved lokasjonen for fjernovervåking omfatter en kontroll- og overvåkingsinnretning (170) og et framvisningssystem (174) for selektiv styring og framvisning av sanntidsvideo fra det minst ene observasj onsområdet.
8. System (100) i henhold til krav 7,karakterisert vedat det i nevnte kontroll- og overvåkingsinnretning (170) er innlemmet kontrollenheter (172) som brukes for å styre systemet (100).
9. System (100) i henhold til krav 6,karakterisert vedat kommunikasjonsinnretningen (160) er anordnet på den stasjonære plattformen (140) og har minst én akustisk transduser for akustisk kommunikasjon og/eller minst én optisk transduser for optisk kommunikasjon.
10. System (100) i henhold til krav 1,karakterisert vedat det er anordnet en avstandsmåler med sikteakse parallell med optisk akse til det minst ene andre kameraet (130).
11. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter sensorer for monitorering av omgivelsesparametere, og hvor disse er anordnet på den stasjonære plattformen (140).
12. System (100) i henhold til et av de foregående kravene, karakterisert vedat det ytterligere omfatter en samling mikrofoner anordnet på den stasjonære plattformen (140), og hvor disse er forbundet til nevnte prosesseringsinnretning (150) slik at utsnittet fra området som skal vises baseres på retningen til registrert lyd.
13. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter et radarsystem anordnet på den nevnte roterende og/eller stasjonære plattformen (120, 140).
14. System (100) i henhold til krav 1,karakterisert vedat den roterende plattformen (120) er forbundet til en stabiliseringsplattform.
15. System (100) i henhold til krav 1,karakterisert vedat det i parallell med den nevnte minst ene første kameraet (110) er et lasersystem som generer et 3D-avstandsbilde av området som overvåkes.
16. Fremgangsmåte for overvåkning av minst ett observasjonsområde,karakterisert vedå utføre følgende trinn: a. å frambringe panoramabilder av det nevnte minst ene området ved hjelp av minst et første kamera (110) som er anordnet på en roterende plattform (120) i det minst ene området som skal overvåkes, og hvor den roterende plattformen omfatter en rotasjonsuavhengig overføring (125) i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet (110); b. å frambringe sanntidsvideo fra det minst ene nevnte området ved hjelp av minst et andre kamera (130) som er anordnet på en stasjonær plattform (140) i det minst ene området som skal overvåkes, og c. å samle inn, prosessere og samordne mottatte signaler fra nevnte kameraer ved hjelp av en prosesseringsinnretning (150) som tilveiebringer prosesserte samordnede signaler.
17. Fremgangsmåte i henhold til krav 16,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) er et linjeskannende kamera.
18. Fremgangsmåte i henhold til krav 16,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) anvender TDI (Time Delay Integration).
19. Fremgangsmåte i henhold til krav 16,karakterisert vedat kun endringer i bilder tatt fra identisk posisjon samles inn for å minimere mengden med data.
20. Fremgangsmåte i henhold til krav 16,karakterisert vedat det for frambringing av sanntidsvideo benyttes et Pan/Tilt/Zoom (PTZ) kamera og hvor orientering og synsfelt av sanntidsvideo styres av PTZ instruksjoner.
21. Fremgangsmåte i henhold til krav 16,karakterisert vedat det brukes et kamera som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
22. Fremgangsmåte i henhold til krav 16,karakterisert vedat nevnte prosesserte samordnede signaler overføres til en lokasjon for fjernovervåking av det minst ene observasjonsområdet, og hvor overføringen gjøres via en kommunikasjonsinnretting (160) forbundet til nevnte prosesseringsinnretning (150).
23. Fremgangsmåte i henhold til krav 16,karakterisert vedat det ved lokasjonen for fjernovervåking brukes en kontroll- og overvåkingsinnretning (170) for styring av systemet (100) for overvåking samt fremvisning av panoramabilder og sanntidsvideo fra det minst ene observasjonsområdet.
24. Fremgangsmåte i henhold til krav 23,karakterisert vedat det i nevnte kontroll- og overvåkingsinnretning (170) benyttes innlemmede kontrollenheter (172) for å styre systemet (100).
25. Fremgangsmåte i henhold til krav 16,karakterisert vedat kommunikasjonsinnretningen (160) som er anordnet på den stasjonære plattformen (140), kommuniserer ved bruk av minst én akustisk transduser for akustisk kommunikasjon og/eller minst én optisk transduser for optisk kommunikasjon.
26. Fremgangsmåte i henhold til krav 16,karakterisert vedat det brukes en avstandsmåler med sikteakse parallell med optisk akse til det minst ene andre kameraet (130).
27. Fremgangsmåte i henhold til krav 16,karakterisert vedat det benyttes en samling akustiske transdusere anordnet på den nevnte stasjonære plattformen (140) og som er forbundet til nevnte prosesseringsinnretning (150) slik at området som skal vises baseres på retningen til registrert lyd.
28. Fremgangsmåte i henhold til krav 16,karakterisert vedat det ytterligere brukes et radarsystem anordnet på den roterende og/eller stasjonære delen (120, 140).
NO20121477A 2012-12-07 2012-12-07 System og fremgangsmåte for overvåking av minst ett observasjonsområde NO334902B1 (no)

Priority Applications (2)

Application Number Priority Date Filing Date Title
NO20121477A NO334902B1 (no) 2012-12-07 2012-12-07 System og fremgangsmåte for overvåking av minst ett observasjonsområde
US14/096,192 US9762864B2 (en) 2012-12-07 2013-12-04 System and method for monitoring at least one observation area

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
NO20121477A NO334902B1 (no) 2012-12-07 2012-12-07 System og fremgangsmåte for overvåking av minst ett observasjonsområde

Publications (2)

Publication Number Publication Date
NO20121477A1 NO20121477A1 (no) 2014-06-09
NO334902B1 true NO334902B1 (no) 2014-07-07

Family

ID=49713069

Family Applications (1)

Application Number Title Priority Date Filing Date
NO20121477A NO334902B1 (no) 2012-12-07 2012-12-07 System og fremgangsmåte for overvåking av minst ett observasjonsområde

Country Status (2)

Country Link
US (1) US9762864B2 (no)
NO (1) NO334902B1 (no)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NO341445B1 (en) * 2015-03-24 2017-11-13 Fmc Kongsberg Subsea As Stand Alone Control Unit
US10139279B2 (en) * 2015-05-12 2018-11-27 BioSensing Systems, LLC Apparatuses and methods for bio-sensing using unmanned aerial vehicles
US9639725B1 (en) * 2015-12-16 2017-05-02 General Electric Company Tracking associate for factory and warehousing optimization
JP6088094B1 (ja) * 2016-06-20 2017-03-01 株式会社Cygames 複合現実環境を作成するためのシステム等
US20180077345A1 (en) * 2016-09-12 2018-03-15 Canon Kabushiki Kaisha Predictive camera control system and method
CN106534795B (zh) * 2016-12-01 2023-05-09 秦皇岛华电测控设备有限公司 一种料位追踪视频监测装置及方法
JP6453501B1 (ja) * 2018-02-01 2019-01-16 株式会社Cygames 複合現実システム、プログラム、方法、及び携帯端末装置
US11258987B2 (en) 2018-09-21 2022-02-22 Microsoft Technology Licensing, Llc Anti-collision and motion control systems and methods
JP7187256B2 (ja) * 2018-10-22 2022-12-12 三菱重工業株式会社 船舶制御システムおよび船舶制御方法
KR102193984B1 (ko) * 2019-05-31 2020-12-22 주식회사 아이디스 감시시스템, 그 시스템에서의 어안 카메라를 이용한 ptz 카메라 제어 방법
US11815598B2 (en) 2019-06-10 2023-11-14 Microsoft Technology Licensing, Llc Anti-collision and motion monitoring, control, and alerting systems and methods
CN112399033B (zh) * 2019-08-14 2022-04-15 杭州海康威视数字技术股份有限公司 摄像机组件和监控摄像机
US20240171709A1 (en) * 2022-11-21 2024-05-23 Fusus, Inc. Emergency dispatch system with video security camera feeds augmented by 360-degree static images

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5790183A (en) 1996-04-05 1998-08-04 Kerbyson; Gerald M. High-resolution panoramic television surveillance system with synoptic wide-angle field of view
WO2006074161A2 (en) * 2005-01-03 2006-07-13 Vumii, Inc. Systems and methods for night time surveillance
US8018489B2 (en) 2005-02-04 2011-09-13 Mccutchen David Surveillance system
MX2011009681A (es) 2009-05-29 2012-01-27 Youngkook Electronics Co Ltd Aparato de camara de supervision inteligente y sistema de supervision de imagen que implementa el mismo.
JP5338498B2 (ja) * 2009-06-09 2013-11-13 ソニー株式会社 監視カメラシステムで使用される制御装置、カメラシステム及びプログラム
EP2449760A1 (en) 2009-06-29 2012-05-09 Bosch Security Systems, Inc. Omni-directional intelligent autotour and situational aware dome surveillance camera system and method
US20120257064A1 (en) 2010-02-01 2012-10-11 Youngkook Electronics Co, Ltd Tracking and monitoring camera device and remote monitoring system using same
TW201316328A (zh) * 2011-10-14 2013-04-16 Hon Hai Prec Ind Co Ltd 聲音反饋裝置及其工作方法

Also Published As

Publication number Publication date
NO20121477A1 (no) 2014-06-09
US20140160235A1 (en) 2014-06-12
US9762864B2 (en) 2017-09-12

Similar Documents

Publication Publication Date Title
NO334902B1 (no) System og fremgangsmåte for overvåking av minst ett observasjonsområde
AU2014396467B2 (en) System and method for remote monitoring at least one observation area
US10366511B2 (en) Method and system for image georegistration
US20090086015A1 (en) Situational awareness observation apparatus
US20120229596A1 (en) Panoramic Imaging and Display System With Intelligent Driver's Viewer
US20090195652A1 (en) Interactive Virtual Window Vision System For Mobile Platforms
US20100045773A1 (en) Panoramic adapter system and method with spherical field-of-view coverage
CN110060614B (zh) 头部佩戴型显示装置及其控制方法、显示系统
JP5483027B2 (ja) 3次元画像計測方法、及び3次元画像計測装置
JP6132767B2 (ja) 超半球視が可能なオプトロニクシステム
RU2722771C1 (ru) Оптико-электронное устройство наблюдения для наземного транспортного средства
JP2008545300A (ja) 改善された仮想ウィンドウ作成方法
KR102125299B1 (ko) 전투차량용 전장상황인식 시스템 및 방법
US20030193562A1 (en) Natural vision-based video surveillance system
CN205318020U (zh) 一种头戴显示设备
EP3903285B1 (en) Methods and systems for camera 3d pose determination
KR20230101974A (ko) 초소형 무인기용 통합영상 제공장치
JPH10285583A (ja) 火災位置及び映像表示伝送システム
JP7266989B2 (ja) 表示装置および表示方法
JPH05241540A (ja) 視覚情報表示装置
JP7216518B2 (ja) 分掌指揮システムおよび分掌指揮方法
JP7187256B2 (ja) 船舶制御システムおよび船舶制御方法
KR102625345B1 (ko) 이동용 시각표시장치를 사용하는 중첩영상정보 제공시스템 및 구현 방법
RU2574324C2 (ru) Оптико-электронная система, имеющая сверхполусферический обзор
Fortin et al. Improving land vehicle situational awareness using a distributed aperture system