NO334902B1 - System og fremgangsmåte for overvåking av minst ett observasjonsområde - Google Patents
System og fremgangsmåte for overvåking av minst ett observasjonsområde Download PDFInfo
- Publication number
- NO334902B1 NO334902B1 NO20121477A NO20121477A NO334902B1 NO 334902 B1 NO334902 B1 NO 334902B1 NO 20121477 A NO20121477 A NO 20121477A NO 20121477 A NO20121477 A NO 20121477A NO 334902 B1 NO334902 B1 NO 334902B1
- Authority
- NO
- Norway
- Prior art keywords
- camera
- area
- monitoring
- platform
- real
- Prior art date
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims description 26
- 238000012545 processing Methods 0.000 claims abstract description 22
- 238000004891 communication Methods 0.000 claims description 11
- 230000003287 optical effect Effects 0.000 claims description 9
- 238000012806 monitoring device Methods 0.000 claims description 8
- 230000003595 spectral effect Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 6
- 239000003086 colorant Substances 0.000 claims description 5
- 230000010354 integration Effects 0.000 claims description 3
- 230000007613 environmental effect Effects 0.000 claims description 2
- 230000006641 stabilisation Effects 0.000 claims description 2
- 238000011105 stabilization Methods 0.000 claims description 2
- 238000012546 transfer Methods 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 3
- 238000004091 panning Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 239000000428 dust Substances 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 206010034960 Photophobia Diseases 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 208000013469 light sensitivity Diseases 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000001556 precipitation Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19641—Multiple cameras having overlapping views on a single scene
- G08B13/19643—Multiple cameras having overlapping views on a single scene wherein the cameras play different roles, e.g. different resolution, different camera type, master-slave camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19617—Surveillance camera constructional details
- G08B13/19626—Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
- G08B13/19628—Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses of wide angled cameras and camera groups, e.g. omni-directional cameras, fish eye, single units having multiple cameras achieving a wide angle view
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19691—Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound
- G08B13/19693—Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound using multiple video sources viewed on a single or compound screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
System for overvåking av minst ett observasjonsområde omfattende minst ett kamera for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera er anordnet på en roterende plattform i det minst ene området som skal overvåkes; minst ett videokamera for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform i det minst ene området som skal overvåkes; prosesseringsinnretning signalforbundet til nevnte kamera og nevnte videokamera for innsamling, prosessering og samordning av signaler.
Description
System og fremgangsmåte for overvåking av minst ett observasjonsområde
Introduksjon
Den foreliggende oppfinnelsen omfatter et system og en fremgangsmåte for overvåkning av minst ett observasjonsområde. Mer spesifikt beskrives et system og en fremgangsmåte for forbedret overvåkning ved å kombinere panoramabilder med sanntidsvideo fra observasjonsområdet som skal overvåkes.
Bakgrunn for oppfinnelsen
Ulike fremgangsmåter og systemer for overvåking og deteksjon av ulike hendelser er velkjent. Dette innbefatter bruk av ulike typer kamerasystemet for å fange inn visuell informasjon fra et område som skal overvåkes.
Bruk av linjeskanner for å frembringe et panoramabilde er i seg selv velkjent. Det samme er bruk at et panorerende og tiltende styrt videokamera.
De fleste eksisterende overvåkningsanlegg utnytter informasjonen fra forskjellige kamerasystemer hver for seg i operasjonsrommene. Dette krever normalt bruk av flere operatører eller at én operatør flytter seg eller blikket rundt til de forskjellige framvisningssystemene for å oppdatere sin situasjonsoversikt.
Det finnes imidlertid systemer som samordner signaler fra flere kameraenheter.
Et eksempel på dette er US-2012098927 Al som beskriver et system for videoovervåking av et område, hvor systemet omfatter et hus som kan rotere, et sanntids panorerende, tiltende zoom-kamera (PTZ-kamera) som har montert et panoramakamera på det samme huset som PTZ kameraet, og hvor en prosesseringsenhet er signalforbundet med de nevnte kameraer for innsamling, prosessering og samordning av signaler. Sammenstillingen er imidlertid slik at høy oppløsning og nøyaktighet i panoramabildet ikke er mulig.
US-2008117294 Al beskriver en overvåkingsinnretning som bruker et linjeskannende kamera på en roterende plattform for å danne et panoramabilde med høy oppløsning. Etterfølgende panoramabilder sammenliknes med hverandre for å detektere endringer i bildet.
Det fordelaktige ved den foreliggende oppfinnelsen er kombinasjonen med bruk av ulike kamerateknologier med ulik sammenstilling og plassering samt innsamling, prosessering og samordning av signaler fra disse.
Oppfinnelsen er ny og oppfinnerisk ved at den muliggjør bruk av simultan tilgang på tilgjengelig data fra forskjellige kamerasystemer og sensorer. Datapresentasjon kan dermed realiseres på kun én framvisningsenhet. Dette forenkler hverdagen vesentlig for hver operatør og antallet operatører kan dermed i de fleste tilfeller reduseres.
Oppfinnelsen realiserer et fleksibelt system for overvåking og som muliggjør svært realistisk visuell presentasjon av et eller flere observasjonsområder selv om tilgjengelig båndbredde for overføring av data med informasjon er begrenset.
Anvendelsesområdet til oppfinnelsen er mangfoldig og omfatter, men er ikke begrenset til stasjonære og mobile luft-, sjø- og landbaserte lokasjoner, eksempelvis montert på helikopter, skip og landgående kjøretøy, for havneovervåkning, Air Traffic Control, baseovervåkning, grenseovervåkning, oljeplattformer, video-konferanser og andre steder hvor man ønsker en følelse av tilstedeværelse ved en lokasjon selv om en befinner seg ved en fjerntliggende lokasjon. Typen bruk av oppfinnelsen kan innebefatte overvåkning, kontroll, observasjon, simulering og opplæring.
Det at en operatør kan betjene ett eller flere observasjonsområder fra et fjerntliggende sted i en kjent og trygg omgivelse bidrar til økt kvalitet og sikkerhet på operatørens arbeid.
Kort beskrivelse av oppfinnelsen
Den foreliggende oppfinnelsen omfatter et system for overvåking av minst ett observasj onsområde.
Systemet omfatter minst ett kamera for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera er anordnet på en roterende plattform i det minst ene området som skal overvåkes og hvor den den roterende plattformen omfatter en rotasjonsuavhengig overføring i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet.
Videre omfatter systemet minst ett kamera for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform i det minst ene området som skal overvåkes.
En prosesseringsinnretning er videre signalforbundet til nevnte kameraer for innsamling, prosessering og samordning av signaler.
Ytterligere trekk ved systemet er beskrevet i de vedlagte uselvstendige kravene.
Oppfinnelsen omfatter også en fremgangsmåte for overvåking av minst ett observasjonsområde slik som definert i det vedlagte kravsettet.
Detaljert beskrivelse av oppfinnelsen
Oppfinnelsen vil nå bli nærmere beskrevet med henvisning til figurer hvor:
Figur 1 viser en oversikt over systemet omfattet av oppfinnelsen;
Figur 2 viser detaljer kontroll- og overvåkingsinnretningen, og
Figur 3 viser et eksempel på en lokasjon hvor overvåking styres fra.
Figur 1 viser en oversikt over de delene som inngår i systemet 100 for overvåking i henhold til oppfinnelsen. Systemet 100 kan betegnes som et hybrid overvåkings-system siden det omfatter ulike kameraløsninger hvor en type kameraer er anordnet på en roterende plattform 120, mens en annen type kameraer er anordnet på en stasjonær plattform 140. Data fra de ulike typene kameraer blir samlet inn, prosessert og samordnet ved hjelp av en prosesseringsinnretning 150.
I det videre beskrives for enkelhetsskyld primært bruk av kun ett kamera plassert på hver av henholdsvis roterende og stasjonær plattform 120, 140. Videre blir ett observasjonsområde beskrevet selv om systemet 100 kan håndtere flere observasjonsområder.
Et første kamera 110 for å frambringe panoramabilder av et observasjonsområde er anordnet på en roterende plattform 120 i området som skal overvåkes.
I henhold til én utførelse av oppfinnelsen er det første kameraet 110 som frambringer panoramabilder et vertikalt linje-skannende kamera med tilhørende optikk og utlesningselektronikk montert på den roterende plattformen 120. Ved en full rotasjon av den roterende plattformen 120 vil dette kameraet fange opp et 360-graders panoramabilde. Linjeskannerteknologi kan gi uniform farge/sorthvitt gjengivelse med oppløsning tilsvarende det menneskelige øyet, dvs. 0,2 - 0,3mrad, noe som er å foretrekke i mange av anvendelsesområdene.
Linjeskannere som brukes i systemet 100 kan være av lik type eller basert på ulik teknologi og monteres på plattformen med en vinkelavstand avhengig av funksjon. Den kan videre være tiltbar for dekning av full hemisfære i observasjonsområdet.
Bildesensoren i en linjeskanner er en samling av vertikale sensorstriper som samler, for eksempel, men ikke avgrenset til, synlig lys, i spektralbånd (farger) og/eller IR og/eller UV.
Linje-skanning kan realiseres ved at sensorpikselmatrisen prosesseres sammen til en vertikal linje med piksler for å forbedre signal/støy forholdet. Teknikken heter TDI (Time Delay Integration). Ved å sette inn et filter eller et prisme som splitter lyset i flere spektralbånd (dvs. farger) og ha en TDI stripe per spektralbånd kan hvert enkelt spektralbånd detekteres. Med denne teknikken kan et fargekamera for RGB enkelt realiseres med økt lysfølsomhet. Dette vil igjen tillate økt skannehastighet.
En egnet kombinasjon av de ulike sensortypene vil sørge for best mulig bevisstgjøring og situasjonsoversikt over et observasjonsområde både natt og dag samt under forhold med nedsatt sikt som følge av eksempelvis tåke eller støv. En scene fra et observasjonsområde kan gjengis i sort/hvitt eller farger.
I parallell med den nevnte linjeskannende bildesensoren er det i en utførelse av oppfinnelsen et roterende laseremitterende og laserskannende sensorsystem som generer et 3D-avstandsbilde av området som overvåkes.
I kombinasjon med det nevnte linje-skannende kamera opererer minimum et andre kamera 130 som er anordnet på en stasjonær plattform 140 for å frambringe sanntidsvideo. Dette er PTZ-kamera. Det vil si at retning og utsnitt av sanntidsvideo som skal framvises styres av PTZ instruksjoner. For å gi kameraet denne funksjonen kan den stasjonære plattformen utgjøres av en to-akset plattform som styres med PTZ instruksjoner for å gi et påmontert kamera nevnte pan-tilt funksjon. Alternativt kan selve kamerahuset som brukes ha disse funksjonene innebygd. Kameraer sender sanntidsvideo av et utsnitt av det nevnte 360-graders panorama- stillbilde som er aktivt.
I en utførelse kan videosignalet fra PTZ-kameraet vises i et eget framvisningssystem eller som et bilde innfelt i nevnte 360-graders panoramabilde, dvs. med bilde-i-bilde funksjonalitet (PIP). Oppløsningen til PTZ-kameraet som benyttes er fortrinnsvis tilsvarende den som det nevnte linje-skannende kameraet operer med. Om ønskelig kan en større del av scenen vises med sanntidsvideo på bekostning av video-signalets oppløsning. Ett PTZ-kamera kan også være sammensatt av flere stirrende kameraer som er opp-linjert seg i mellom. På denne måten kan en større sektor av panoramabildet presenteres som sanntidsvideo uten redusert oppløsning.
I en utførelse er det anordnet en avstandsmåler med sikteakse parallell med optisk akse til det andre kameraet 130 som frambringer sanntidsvideo.
Det andre kameraet 130 som benyttes til frambringing av sanntidsvideo kan, tilsvarende kameraet som frambringer panoramabilder, ha bildesensorer som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
Kameraene og sensorsammenstillingen som er plassert i ett eller flere observasjonsområder er tilpasset for å kunne operere under alle miljøer slik at de tåler ulike forhold med hensyn til bl.a. temperatur, vind, støv, nedbør og annet som kan nedsette sensorsammenstillingens ytelse.
Systemet 100 kan ytterligere omfatte sensorer for monitorering av ulike omgivelsesparametere. Slike er da anordnet på den stasjonære plattformen 140.
I en utførelse omfatter systemet 100 ytterligere en samling mikrofoner anordnet på den stasjonære delen 140, og hvor disse er forbundet til nevnte prosesseringsinnretning 150 slik at sanntidsvideo fra området som skal vises kan baseres på retningen til registrert lyd. Lydbildet fra scenen kan også gjengis for operatøren synkront med bildet for økt situasjonsforståelse. Dette signalet presenteres for operatøren via et antall høyttalere 176 slik at lyd og bilde fra scenen gjenskapes med samme forhold som ved opptaksstedet.
Systemet 100 kan ytterligere omfatte et radarsystem som er anordnet på nevnte stasjonære del 140 for å identifisere objekter, deres posisjon og hastighet, 100 når sikten og visuell informasjon er dårlig. Radarsystemet kan også monteres på roterende del, hvor det er synkronisert med panoramabildene.
Den roterende plattformen 120 inneholder et posisjoneringssystem som sørger for gjengivelse av et komplett panoramabilde for hver rotasjon. Den roterende plattformen 120 omfatter videre en rotasjonsuavhengig overføring 125 i form av en kontakt eller trådløs slepering for fortløpende overføring av data fra det panorerende kameraet. Prosessering av innsamlede data kan skje i alle ledd av sammenstillingen for å redusere datamengden der det er behov for det.
Panoramabildene kan bli vist på et eksternt fremvisningssystem og vil oppdateres i takt med den roterende plattformens 120 rotasjonshastighet. Ny informasjon kan presenteres enten linjevis, seksjonsvis etter hvert som ny informasjon er innsamlet, eller ned mot en gang per runde hvor et helt nytt panoramabilde vises for operatøren 180.
Understellet som blir brukt til kameraene i observasjonsområdet er fortrinnsvis av en type som sørger for stabilitet for å generere stabile bilder under dynamiske forhold som opptrer under ulike anvendelsesområder. I en utførelse er derfor understellet en stabiliseringsplattform som den roterende plattformen 120 er forbundet til.
Når systemet 100 er operativt vil det generere store datamengder som må prosesseres og behandles før oversendelse til en lokasjon for fjernovervåking, som omfatter en kontroll- og overvåkingsinnretning 170 for styring av overvåkningssystemet samt fremvisning av data fra sensorene, eksempelvis panoramabilder og sanntidsvideo fra i det minst ene observasjonsområde.
For å sende overvåkings data omfatter systemet 100 en kommunikasjonsinnretning 160 forbundet til prosesseringsinnretningen slik at prosesserte samordnede signaler overføres til lokasjon for fjernovervåking av det minst ene observasjonsområdet.
Prosessering av data og bildebehandling kan innebefatte, men er ikke begrenset til, datakomprimering og bildedifferering. Reduksjon av utsendt datamengde kan oppnås ved kun å sende ny/endret informasjon i etterfølgende bilder. Graden av komprimering kan være tilpasset tilgjengelig båndbredde.
Informasjon sendes over et egnet kommunikasjonsmedium som eksempelvis, men ikke avgrenset til, dedikerte linjer (fiber, kobber), trådløst (WiFi, Internett, optisk) og hvor avstand er ubegrenset.
I en utførelse kan systemet 100 også omfatte lokal kommunikasjon via minst én akustisk eller optisk transduser.
Figur 2 viser detaljer ved kontroll og overvåkingsinnretningen 170 med et framvisningssystem 174 for overvåkingen befinner seg fortrinnsvis på en lokasjon hvor en operatør 180 kan styre systemet 100 i trygge omgivelser. Systemet 100 kan vise hele eller deler av det nevnte 360-graders bilde, med oppløsning til og med, men ikke avgrenset til den nevnte øye-oppløsningen. Dersom mindre sektorer vises kan man panorere i stillbildet via et brukergrensesnitt. Fremvisningssystemet kan bestå av, men er ikke avgrenset til varianter av monitorer, prosjektører for front-eller bak-projeksjon, OLED-tapet, display briller, et hjelm-montert display eller en form for kombinasjon av de nevnte. For en mer virkelighetstro presentasjon, presenteres bildet på en kuleformet, sømløs skjerm eller display.
Den delen av scenen som framvises i sanntids-video defineres av en operatør 180 gjennom en kommando gitt via et brukergrensesnitt. Dette kan, men er ikke begrenset til å være håndbevegelser, control-grip, øye-tracking, hode-tracking og/eller virtuell kikkert. Eksempel på sistnevnte kan være en håndholdt enhet med pekefunksjon og integrerte skjermer samt zoom/focus justering. Når operatøren 180 har et objekt av interesse i synsfeltet til et PTZ-kamera kan objektet trackes automatisk av nevnte PTZ-kamera og dersom sanntidsframvisning framvises som et innfelt bilde i panoramabilde vil nevnte innfelte bilde flytte seg med objektet av interesse relativt til panoramabildet. Dersom flere PTZ-kameraer er tilgjengelig kan flere objekter følges samtidig i sanntid. Operatøren 180 har også mulighet til å styre PTZ-kameraet til å følge en forutbestemt bane.
For å øke ytelsen til kameraet på roterende plattform kan ytterligere bildebehandling benyttes for å gjøre bruken enklere, øke observerbarheten eller gjøre bildet så identisk med en reell scene som mulig. Eksempler er kontrastforbedring, super-resolution, HDR-bilde-generering og bevegelses-deteksjon.
I tillegg til bilde-i-bilde funksjonalitet kan systemet 100 vise annen informasjon som en overlagring (overlay), i dedikerte vinduer, eller på egne framvisningssystemer. Eksempler på informasjon kan være temperatur og værdata, informasjon som innhentes av dedikerte sensorer montert på plattformen. Radarinformasjon kan også fusjoneres med panoramabildet eller presenteres på et eget framvisningssystem. Systemet 100 kan leveres med et tilpasset radarsystem, eksempelvis en doppler-radar, eller utnyttelse av eksisterende, tilgjengelige radar-systemer. Informasjon om kjente stasjonære eller bevegelige elementer i scenen kan også inkluderes i fremvisningssystemet.
Det registrerte lydsignalet kan presenteres for operatøren 180 via et antall høyttalere 176 slik at lyd og bilde fra scenen gjenskapes med samme forhold som ved opptaksstedet.
I tillegg til video og stillbilder kan systemet 100 gjøre kontinuerlige avstandsmålinger fra systemets 100 posisjon til et objekt av interesse. Avstanden presenteres i ønsket benevning som overlay eller i dedikerte vinduer. I parallell med kameraer på den roterende plattformen kan et lasersystem genere et 3D-avstandsbilde av scenen som overvåkes.
I en utførelse av systemet har operatøren 180 har mulighet til å kommunisere via mikrofoner 178 ved hjelp av lyd- og lyssignaler via sensorsystemet fra sin eksterne lokasjon. Den eksterne lokasjonen hvor kontroll- og overvåkingsinnretningen 170 befinner seg, innebefatter i en utførelse av oppfinnelsen også et sett akustiske transdusere, i tillegg til ett eller flere framvisningssystemer samt et nevnt brukergrensesnitt som betjenes via nevnte håndbevegelser og/eller et kontrollpanel. Benyttelsen av et standardisert brukergrensesnitt som tillater at operatøren 180 kan ha en form for opplæring for å betjene flere fjerntliggende overvåkningsposter.
Figur 3 viser et eksempel på en lokasjon hvor overvåking styres fra. I figuren vises et flertall display eller monitorer satt sammen i en krummet konfigurasjon foran en operatør 180 slik at observasjonsområdet som overvåkes dekker hele synsfeltet til operatøren 180. Figuren viser en synsvinkel på ca. 180°, men ved å bygge dette ut med flere monitorer vil 360° kunne realiseres.
I en annen utførelse kan den visuelle informasjonen fra et observasjonsområde framvises for en operatør 180 ved at han/hun er utstyrt med en hjelm med et påmontert display eller som bruker en displaybrille.
Framvisning av et eller flere observasjonsområder kan også gjøres på lerret eller liknende ved bruk av for- eller bak-projeksjon.
3D-framvisning kan også realiseres dersom det ved observasjonsområdet generes et 3D-avstandsbilde av scenen som overvåkes. Dersom to eller flere sensor-sammenstillinger er tilknyttet samme framvisningssystem, kan to-og-to signaler vises samtidig med ulik polarisering (samme teknologi som 3D-briller) hvor to operatører 180 har briller og headset som filtrerer ut den ene polariseringen. På denne måten kan to operatører 180 overvåke to steder samtidig fra samme kontrollrom, uten tap av synsfelt, oppløsning eller observasjonsevne. Ved å gå ned på oppløsning eller synsfelt kan to observasjonsposter framvises for en operatør 180 på det samme framvisningssystemet, enten over/under eller i hver sin sektor.
Fra sin lokasjon vil en operatør 180 kunne styre hva som ønskes framvist for nærmere iaktakelse ved ulike styringsmidler som f.eks. håndbevegelser, sporing av hode- og/eller øyeposisjon (head track, eye track), en trykkfølsom skjerm, virtuell kikkert, muntlige kommandoer og andre kjente styringsmidler.
Hva som framvises av sanntidsvideo ved hjelp av det nevnte minst ene andre kameraet 130 fra observasjonsområdet kan systemet styre helautomatisk basert på tolking av detekterte bevegelser, lyd og lys fra observasjonsområdet. En operatør 180 kan imidlertid overstyre en eller flere av disse og kan styre hele systemet manuelt basert på egne syns- og hørselsinntrykk.
Den foreliggende oppfinnelsen som over er beskrevet som et system 100 utgjøres også av en fremgangsmåte for overvåkning av minst ett observasjonsområde. Fremgangsmåte omfatter et flertall trinn, hvor det første trinnet er å frambringe panoramabilder av det nevnte minst ene området ved hjelp av minst et første kamera 110 som er anordnet på en roterende plattform 120 i det minst ene området som skal overvåkes.
Det andre trinnet er å frambringe sanntidsvideo fra det minst ene nevnte området ved hjelp av minst et andre kamera 130 som er anordnet på en stasjonær plattform 140 i det minst ene området som skal overvåkes, og
Det siste trinnet er å samle inn, prosessere og samordne mottatte signaler fra nevnte kameraer ved hjelp av en prosesseringsinnretning 150 som tilveiebringer prosesserte samordnede signaler.
Ytterligere trekk ved fremgangsmåten er beskrevet i kravsettet og betydningen av disse vil forstås i sammenheng med den detaljerte beskrivelsen av systemet.
Oppfinnelsen vil kunne erstatte og sentralisere flere ulike typer av overvåkning, kontroll, observasjon, søk, simulering og trening både til sjøs, i luften og på land, for sivile og militære anvendelser.
Eksempler på anvendelsesområder til sjøs er oljeplattformer og skipsmonterte implementeringer. Sistnevnte kan være cruise-skip, rørleggere, isbrytere og lignende.
Anvendelsesområder i luft kan f.eks. være implementeringer av oppfinnelsen i helikopter og droner eller bemannede fly, mens det på land kan være i forbindelse med kontroll av lufttrafikk, anti-terror, grenseoverganger, havneovervåkning, og søppeldyngeovervåkning.
Oppfinnelsen er også egnet implementert i forbindelse med videokonferanse eller turisme som f.eks. et 'World Wide Virtual Tourist Center' eller andre anvendelsesområder hvor tilstedeværelse fra en fjern lokasjon er ønskelig.
Claims (28)
1. System (100) for overvåking av minst ett observasjonsområde,karakterisert vedat det omfatter: a. minst et første kamera (110) for å frambringe panoramabilder av det nevnte minst ene området, hvilket kamera (110) er anordnet på en roterende plattform (120) i det minst ene området som skal overvåkes og hvor den den roterende plattformen (120) omfatter en rotasjonsuavhengig overføring (125) i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet (110); b. minst et andre kamera (130) for å frambringe sanntidsvideo og som er anordnet på en stasjonær plattform (140) i det minst ene området som skal overvåkes; c. prosesseringsinnretning (150) signalforbundet til nevnte kameraer (110, 130) for innsamling, prosessering og samordning av signaler.
2. System (100) i henhold til krav 1,karakterisert vedat det minst ene første kameraet (110) anordnet på den roterende plattformen (120) omfatter et linjeskannende kamera.
3. System (100) i henhold til krav 1,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) anvender TDI (Time Delay Integration).
4. System (100) i henhold til krav 1,karakterisert vedat det minst ene andre kameraet (130) for frambringing av sanntidsvideo har digitalt Pan/Tilt/Zoom (PTZ) funksjonalitet og hvor retning og utsnitt av sanntidsvideo som skal framvises styres av PTZ instruksjoner.
5. System (100) i henhold til et av de foregående kravene,
karakterisert vedat kameraene (110, 130) har en bildesensor som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
6. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter en kommunikasjonsinnretning (160) forbundet til nevnte prosesseringsinnretning (150) for å overføre prosesserte samordnede signaler til en lokasjon for styring og overvåking av det minst ene observasjons området.
7. System (100) i henhold til krav 6,karakterisert vedat systemet (100) ved lokasjonen for fjernovervåking omfatter en kontroll- og overvåkingsinnretning (170) og et framvisningssystem (174) for selektiv styring og framvisning av sanntidsvideo fra det minst ene observasj onsområdet.
8. System (100) i henhold til krav 7,karakterisert vedat det i nevnte kontroll- og overvåkingsinnretning (170) er innlemmet kontrollenheter (172) som brukes for å styre systemet (100).
9. System (100) i henhold til krav 6,karakterisert vedat kommunikasjonsinnretningen (160) er anordnet på den stasjonære plattformen (140) og har minst én akustisk transduser for akustisk kommunikasjon og/eller minst én optisk transduser for optisk kommunikasjon.
10. System (100) i henhold til krav 1,karakterisert vedat det er anordnet en avstandsmåler med sikteakse parallell med optisk akse til det minst ene andre kameraet (130).
11. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter sensorer for monitorering av omgivelsesparametere, og hvor disse er anordnet på den stasjonære plattformen (140).
12. System (100) i henhold til et av de foregående kravene,
karakterisert vedat det ytterligere omfatter en samling mikrofoner anordnet på den stasjonære plattformen (140), og hvor disse er forbundet til nevnte prosesseringsinnretning (150) slik at utsnittet fra området som skal vises baseres på retningen til registrert lyd.
13. System (100) i henhold til krav 1,karakterisert vedat det ytterligere omfatter et radarsystem anordnet på den nevnte roterende og/eller stasjonære plattformen (120, 140).
14. System (100) i henhold til krav 1,karakterisert vedat den roterende plattformen (120) er forbundet til en stabiliseringsplattform.
15. System (100) i henhold til krav 1,karakterisert vedat det i parallell med den nevnte minst ene første kameraet (110) er et lasersystem som generer et 3D-avstandsbilde av området som overvåkes.
16. Fremgangsmåte for overvåkning av minst ett observasjonsområde,karakterisert vedå utføre følgende trinn: a. å frambringe panoramabilder av det nevnte minst ene området ved hjelp av minst et første kamera (110) som er anordnet på en roterende plattform (120) i det minst ene området som skal overvåkes, og hvor den roterende plattformen omfatter en rotasjonsuavhengig overføring (125) i form av en kontakt eller trådløs slepering for å overføre data fra det minst ene første kameraet (110); b. å frambringe sanntidsvideo fra det minst ene nevnte området ved hjelp av minst et andre kamera (130) som er anordnet på en stasjonær plattform (140) i det minst ene området som skal overvåkes, og c. å samle inn, prosessere og samordne mottatte signaler fra nevnte kameraer ved hjelp av en prosesseringsinnretning (150) som tilveiebringer prosesserte samordnede signaler.
17. Fremgangsmåte i henhold til krav 16,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) er et linjeskannende kamera.
18. Fremgangsmåte i henhold til krav 16,karakterisert vedat det minst ene første kameraet (110) som er anordnet på den roterende plattformen (120) anvender TDI (Time Delay Integration).
19. Fremgangsmåte i henhold til krav 16,karakterisert vedat kun endringer i bilder tatt fra identisk posisjon samles inn for å minimere mengden med data.
20. Fremgangsmåte i henhold til krav 16,karakterisert vedat det for frambringing av sanntidsvideo benyttes et Pan/Tilt/Zoom (PTZ) kamera og hvor orientering og synsfelt av sanntidsvideo styres av PTZ instruksjoner.
21. Fremgangsmåte i henhold til krav 16,karakterisert vedat det brukes et kamera som opererer i synlige spektralbånd (farger) og/eller IR og/eller UV.
22. Fremgangsmåte i henhold til krav 16,karakterisert vedat nevnte prosesserte samordnede signaler overføres til en lokasjon for fjernovervåking av det minst ene observasjonsområdet, og hvor overføringen gjøres via en kommunikasjonsinnretting (160) forbundet til nevnte prosesseringsinnretning (150).
23. Fremgangsmåte i henhold til krav 16,karakterisert vedat det ved lokasjonen for fjernovervåking brukes en kontroll- og overvåkingsinnretning (170) for styring av systemet (100) for overvåking samt fremvisning av panoramabilder og sanntidsvideo fra det minst ene observasjonsområdet.
24. Fremgangsmåte i henhold til krav 23,karakterisert vedat det i nevnte kontroll- og overvåkingsinnretning (170) benyttes innlemmede kontrollenheter (172) for å styre systemet (100).
25. Fremgangsmåte i henhold til krav 16,karakterisert vedat kommunikasjonsinnretningen (160) som er anordnet på den stasjonære plattformen (140), kommuniserer ved bruk av minst én akustisk transduser for akustisk kommunikasjon og/eller minst én optisk transduser for optisk kommunikasjon.
26. Fremgangsmåte i henhold til krav 16,karakterisert vedat det brukes en avstandsmåler med sikteakse parallell med optisk akse til det minst ene andre kameraet (130).
27. Fremgangsmåte i henhold til krav 16,karakterisert vedat det benyttes en samling akustiske transdusere anordnet på den nevnte stasjonære plattformen (140) og som er forbundet til nevnte prosesseringsinnretning (150) slik at området som skal vises baseres på retningen til registrert lyd.
28. Fremgangsmåte i henhold til krav 16,karakterisert vedat det ytterligere brukes et radarsystem anordnet på den roterende og/eller stasjonære delen (120, 140).
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
NO20121477A NO334902B1 (no) | 2012-12-07 | 2012-12-07 | System og fremgangsmåte for overvåking av minst ett observasjonsområde |
US14/096,192 US9762864B2 (en) | 2012-12-07 | 2013-12-04 | System and method for monitoring at least one observation area |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
NO20121477A NO334902B1 (no) | 2012-12-07 | 2012-12-07 | System og fremgangsmåte for overvåking av minst ett observasjonsområde |
Publications (2)
Publication Number | Publication Date |
---|---|
NO20121477A1 NO20121477A1 (no) | 2014-06-09 |
NO334902B1 true NO334902B1 (no) | 2014-07-07 |
Family
ID=49713069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
NO20121477A NO334902B1 (no) | 2012-12-07 | 2012-12-07 | System og fremgangsmåte for overvåking av minst ett observasjonsområde |
Country Status (2)
Country | Link |
---|---|
US (1) | US9762864B2 (no) |
NO (1) | NO334902B1 (no) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
NO341445B1 (en) * | 2015-03-24 | 2017-11-13 | Fmc Kongsberg Subsea As | Stand Alone Control Unit |
US10139279B2 (en) * | 2015-05-12 | 2018-11-27 | BioSensing Systems, LLC | Apparatuses and methods for bio-sensing using unmanned aerial vehicles |
US9639725B1 (en) * | 2015-12-16 | 2017-05-02 | General Electric Company | Tracking associate for factory and warehousing optimization |
JP6088094B1 (ja) * | 2016-06-20 | 2017-03-01 | 株式会社Cygames | 複合現実環境を作成するためのシステム等 |
US20180077345A1 (en) * | 2016-09-12 | 2018-03-15 | Canon Kabushiki Kaisha | Predictive camera control system and method |
CN106534795B (zh) * | 2016-12-01 | 2023-05-09 | 秦皇岛华电测控设备有限公司 | 一种料位追踪视频监测装置及方法 |
JP6453501B1 (ja) * | 2018-02-01 | 2019-01-16 | 株式会社Cygames | 複合現実システム、プログラム、方法、及び携帯端末装置 |
US11258987B2 (en) | 2018-09-21 | 2022-02-22 | Microsoft Technology Licensing, Llc | Anti-collision and motion control systems and methods |
JP7187256B2 (ja) * | 2018-10-22 | 2022-12-12 | 三菱重工業株式会社 | 船舶制御システムおよび船舶制御方法 |
KR102193984B1 (ko) * | 2019-05-31 | 2020-12-22 | 주식회사 아이디스 | 감시시스템, 그 시스템에서의 어안 카메라를 이용한 ptz 카메라 제어 방법 |
US11815598B2 (en) | 2019-06-10 | 2023-11-14 | Microsoft Technology Licensing, Llc | Anti-collision and motion monitoring, control, and alerting systems and methods |
CN112399033B (zh) * | 2019-08-14 | 2022-04-15 | 杭州海康威视数字技术股份有限公司 | 摄像机组件和监控摄像机 |
US20240171709A1 (en) * | 2022-11-21 | 2024-05-23 | Fusus, Inc. | Emergency dispatch system with video security camera feeds augmented by 360-degree static images |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5790183A (en) | 1996-04-05 | 1998-08-04 | Kerbyson; Gerald M. | High-resolution panoramic television surveillance system with synoptic wide-angle field of view |
US20060238617A1 (en) * | 2005-01-03 | 2006-10-26 | Michael Tamir | Systems and methods for night time surveillance |
US8018489B2 (en) | 2005-02-04 | 2011-09-13 | Mccutchen David | Surveillance system |
AU2010253639A1 (en) | 2009-05-29 | 2011-10-06 | Youngkook Electronics, Co., Ltd. | Intelligent monitoring camera apparatus and image monitoring system implementing same |
JP5338498B2 (ja) * | 2009-06-09 | 2013-11-13 | ソニー株式会社 | 監視カメラシステムで使用される制御装置、カメラシステム及びプログラム |
EP2449760A1 (en) | 2009-06-29 | 2012-05-09 | Bosch Security Systems, Inc. | Omni-directional intelligent autotour and situational aware dome surveillance camera system and method |
MY157170A (en) | 2010-02-01 | 2016-05-13 | Youngkook Electronics Co Ltd | Tracking and monitoring camera device and remote monitoring system using same |
TW201316328A (zh) * | 2011-10-14 | 2013-04-16 | Hon Hai Prec Ind Co Ltd | 聲音反饋裝置及其工作方法 |
-
2012
- 2012-12-07 NO NO20121477A patent/NO334902B1/no unknown
-
2013
- 2013-12-04 US US14/096,192 patent/US9762864B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
NO20121477A1 (no) | 2014-06-09 |
US20140160235A1 (en) | 2014-06-12 |
US9762864B2 (en) | 2017-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
NO334902B1 (no) | System og fremgangsmåte for overvåking av minst ett observasjonsområde | |
US10366511B2 (en) | Method and system for image georegistration | |
AU2014396467B2 (en) | System and method for remote monitoring at least one observation area | |
US20090086015A1 (en) | Situational awareness observation apparatus | |
US20090195652A1 (en) | Interactive Virtual Window Vision System For Mobile Platforms | |
US20120229596A1 (en) | Panoramic Imaging and Display System With Intelligent Driver's Viewer | |
JP5483027B2 (ja) | 3次元画像計測方法、及び3次元画像計測装置 | |
CN110060614B (zh) | 头部佩戴型显示装置及其控制方法、显示系统 | |
US20100045773A1 (en) | Panoramic adapter system and method with spherical field-of-view coverage | |
JP6132767B2 (ja) | 超半球視が可能なオプトロニクシステム | |
JP2008545300A (ja) | 改善された仮想ウィンドウ作成方法 | |
RU2722771C1 (ru) | Оптико-электронное устройство наблюдения для наземного транспортного средства | |
KR102125299B1 (ko) | 전투차량용 전장상황인식 시스템 및 방법 | |
US20030193562A1 (en) | Natural vision-based video surveillance system | |
CN205318020U (zh) | 一种头戴显示设备 | |
EP3903285B1 (en) | Methods and systems for camera 3d pose determination | |
KR20230101974A (ko) | 초소형 무인기용 통합영상 제공장치 | |
JP7266989B2 (ja) | 表示装置および表示方法 | |
JPH05241540A (ja) | 視覚情報表示装置 | |
JP7216518B2 (ja) | 分掌指揮システムおよび分掌指揮方法 | |
JP7187256B2 (ja) | 船舶制御システムおよび船舶制御方法 | |
KR102625345B1 (ko) | 이동용 시각표시장치를 사용하는 중첩영상정보 제공시스템 및 구현 방법 | |
RU2574324C2 (ru) | Оптико-электронная система, имеющая сверхполусферический обзор | |
Fortin et al. | Improving land vehicle situational awareness using a distributed aperture system |