EP0939386A1 - Space surveillance device - Google Patents
Space surveillance device Download PDFInfo
- Publication number
- EP0939386A1 EP0939386A1 EP98103542A EP98103542A EP0939386A1 EP 0939386 A1 EP0939386 A1 EP 0939386A1 EP 98103542 A EP98103542 A EP 98103542A EP 98103542 A EP98103542 A EP 98103542A EP 0939386 A1 EP0939386 A1 EP 0939386A1
- Authority
- EP
- European Patent Office
- Prior art keywords
- image sensor
- motion detector
- evaluation
- signal
- detector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19604—Image analysis to detect motion of the intruder, e.g. by frame subtraction involving reference image or background adaptation with time to compensate for changing conditions, e.g. reference image update on detection of light level change
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19697—Arrangements wherein non-video detectors generate an alarm themselves
Abstract
Description
Die vorliegende Erfindung betrifft eine Einrichtung zur Raumüberwachung, mit mindestens einem Bildsensor und mindestens einem Präsenz- oder Bewegungsdetektor und mit einer Steuerungs- und Auswerteelektronik.The present invention relates to a device for room surveillance, with at least an image sensor and at least one presence or motion detector and with one Control and evaluation electronics.
Bei einer in der EP-A-0 772 168 beschriebenen Einrichtung dieser Art dient der Präsenz- oder Bewegungsdetektor ausschliesslich zur Reduktion des Stromverbrauchs der vorzugsweise batteriegespeisten Einrichtung, indem er den Bildsensor im Bedartsfall einschaltet. Ähnliches gilt für das in der GB-A-2 309 133 beschriebene Video-Überwachungssystem, dessen Bildsensor an einen Videorecorder angeschlossen ist. Hier ermöglicht der Präsenz- oder Bewegungsdetektor eine bessere Ausnutzung des zur Bildspeicherung verwendeten Magnetbandes, indem er den Videorecorder nur im Bedarfsfall einschaltet.In a device of this type described in EP-A-0 772 168, the presence or Motion detector exclusively to reduce the power consumption of the preferred battery-powered device by switching on the image sensor when necessary. Similar thing applies to the video surveillance system described in GB-A-2 309 133, whose image sensor connected to a VCR. Here the presence or motion detector enables better utilization of the magnetic tape used for image storage, by turning on the VCR only when needed.
Diese bekannten Einrichtungen stellen also gespeicherte Bildinformation zur Verfügung, die von einer Bedienungsperson ausgewertet werden muss, was bekanntlich ausserordentlich monoton und ermüdend ist. Da keinerlei Unterscheidung der aufgezeichneten Ereignisse nach Tolerierbarkeit und Meldewürdigkeit stattfindet, kann von intelligenter Überwachung nicht gesprochen werden.These known devices therefore provide stored image information that must be evaluated by an operator, which is known to be extraordinary is monotonous and tiring. Since there is no distinction between the recorded events Tolerability and reportability takes place, can not speak of intelligent surveillance become.
Bei einer im DE-U-297 18 312 beschriebenen Einrichtung, die einen Bildsensor, eine Stufe zur Festbilderstellung und Festbildabspeicherung, eine Stufe zur Differenzbilderstellung und eine Stufe zur Bildanalyse enthält, wird das Analyseergebnis mit vorgegebenen Kriterien der Meldewürdigkeit verglichen, wobei bei positivem Ergebnis eine Meldung an eine Zentralstation erfolgt. Diese Einrichtung ermöglicht zwar eine intelligente Überwachung, indem die Überprüfung der Signale des Bildsensors auf Tolerierbarkeit und Meldewürdigkeit automatisch erfolgt, so dass nur dann eine Meldung an die Zentrale geht, wenn ein positives Analyseergebnis vorliegt. Da aber der Bildsensor auf Beleuchtung im Sichtbaren oder im nahen Infrarot angewiesen ist und daher unterhalb einer bestimmten Minimalbeleuchtung keine auswertbaren Bilder liefern kann, ist es fraglich, ob diese Einrichtung die gewünschte Sicherheit bietet oder, mit anderen Worten, ob sie ausreichend robust ist.In a device described in DE-U-297 18 312, which has an image sensor, a stage for Still image creation and still image storage, a stage for creating difference images and one Contains the stage for image analysis, the analysis result is based on predefined criteria of reportability compared, with a positive result, a message is sent to a central station. While this facility allows for intelligent surveillance by checking the signals of the image sensor for tolerance and reporting reliability are carried out automatically, so that a message is only sent to the head office if a positive analysis result is available. But since the image sensor relies on lighting in the visible or near infrared and therefore provide no evaluable images below a certain minimum lighting , it is questionable whether this facility offers the desired security or, with others Words whether it is sufficiently robust.
Durch die Erfindung soll nun eine Einrichtung der eingangs genannten Art angegeben werden, die eine intelligente Überwachung, eine optimale Täuschungssicherheit und eine ausreichende Robustheit gewährleistet. The invention is now intended to provide a device of the type mentioned at the beginning, which intelligent surveillance, optimal security against deception and sufficient Robustness guaranteed.
Diese Aufgabe wird erfindungsgemäss dadurch gelöst, dass die Steuerungs- und Auswerteelektronik eine Verarbeitungsstufe zur lokalen Signalauswertung aufweist, an welche der mindestens eine Bildsensor und der mindestens eine Präsenz- oder Bewegungsdetektor angeschlossen sind, und dass in der Verarbeitungsstufe eine kombinierte Auswertung der Signale des mindestens einen Bildsensors und des mindestens einen Präsenz- oder Bewegungsdetektors erfolgt.According to the invention, this object is achieved in that the control and evaluation electronics has a processing stage for local signal evaluation to which the at least an image sensor and the at least one presence or motion detector connected are, and that in the processing stage a combined evaluation of the signals of the at least one image sensor and the at least one presence or motion detector he follows.
Die erfindungsgemässe Einrichtung ist also ein Zwei- oder Mehrkriterienbewegungsmelder mit mindestens einem Bildsensor. Dieser Melder weist sowohl gegenüber bekannten Dual-Meldern als auch gegenüber reinen Bildsensoren wesentliche Vorteile auf. Verglichen mit den Dual-Meldern, bei denen keine oder nur eine sehr grobe räumliche Auflösung möglich ist, so dass eine Unterscheidung zwischen Mensch und Tier oftmals nicht erfolgen kann, ist der erfindungsgemässe Melder wesentlich robuster. Ausserdem bietet der Bildsensor die Möglichkeit der Klassifizierung der Objekte anhand ihrer Geometrie und Bewegung und damit der intelligenten Überwachung sowie der Verifikation und der Speicherung von Ereignissen und der späteren Abrufbarkeit von diesen.The device according to the invention is therefore a two- or multi-criteria motion detector at least one image sensor. This detector has both known dual detectors as well as significant advantages compared to pure image sensors. Compared to the dual detectors, where no or only a very rough spatial resolution is possible, so that A distinction between humans and animals can often not be made, is the inventive Detectors much more robust. The image sensor also offers the option of Classification of objects based on their geometry and movement and thus the intelligent Monitoring and verification and storage of events and later Accessibility from these.
Gegenüber einem reinen Bildsensor hat der erfindungsgemässe Melder den Vorteil, dass er auch bei schlechten Beleuchtungsverhältnissen immer noch die Leistung eines Präsenz- oder Bewegungsdetektors erbringt und damit voll funktionsfähig ist. Zudem kann der Präsenz- oder Bewegungsdetektor die Bildverarbeitungsalgorithmen bei der Interpretation schwieriger Situationen unterstützen.Compared to a pure image sensor, the detector according to the invention has the advantage that it even in poor lighting conditions the performance of a presence or Provides motion detector and is therefore fully functional. In addition, the presence or Motion detector the image processing algorithms when interpreting difficult situations support.
Eine erste bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass vor der kombinierten Auswertung der Signale eine getrennte Vorauswertung sowohl der Signale des mindestens einen Bildsensors als auch derjenigen des mindestens einen Präsenz- oder Bewegungsdetektors erfolgt.A first preferred embodiment of the device according to the invention is characterized in that that before the combined evaluation of the signals, a separate pre-evaluation both the signals of the at least one image sensor and that of the at least one a presence or motion detector.
Eine zweite bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass der mindestens eine Bildsensor durch einen CMOS-Bildsensor, vorzugsweise einen Aktiv Pixel Sensor, gebildet ist.This is a second preferred embodiment of the device according to the invention characterized in that the at least one image sensor by a CMOS image sensor, preferably an active pixel sensor is formed.
Die Ausbildung des mindestens einen Bildsensors als CMOS-Bildsensor hat unter anderem den Vorteil eines gegenüber CCD-Kameras um Grössenordnungen tieferen Stromverbrauchs und der Zugriffsmöglichkeit auf einzelne Pixel. Letzteres erlaubt, Bilder mit reduzierter Auflösung oder nur interessante Bildbereiche auszulesen, wogegen bei CCD-Kameras die Pixel nur zeilenweise ausgelesen werden können.The formation of the at least one image sensor as a CMOS image sensor has, among other things the advantage of an order of magnitude lower power consumption than CCD cameras and the ability to access individual pixels. The latter allows images with reduced resolution or only read out interesting areas of the image, whereas with CCD cameras the pixels only can be read out line by line.
Eine dritte bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass ein Mittel zur Bestimmung der Entfernung eines von dem mindestens einen Präsenz- oder Bewegungsdetektor detektierten Objekts vorgesehen und dass das Distanzsignal dieses Mittels der Verarbeitungsstufe zugeführt ist.A third preferred embodiment of the device according to the invention is thereby characterized as a means of determining the distance of one of the at least a presence or motion detector detected object and that the Distance signal of this means is fed to the processing stage.
Im folgenden wird die Erfindung anhand eines Ausführungsbeispiels und der Zeichnungen näher erläutert; es zeigt:
- Fig. 1
- ein Blockschema eines erfindungsgemässen Einrichtung zur Raumüberwachung; und
- Fig. 2
- ein Flussdiagramm zur Erläuterung der Signalverarbeitung.
- Fig. 1
- a block diagram of an inventive device for room monitoring; and
- Fig. 2
- a flowchart to explain the signal processing.
Die in Fig. 1 dargestellte Einrichtung zur Raumüberwachung besteht im wesentlichen aus
einem nachfolgend als Melder bezeichneten Mehrkriterienbewegungsmelder 1 und aus einer
nachfolgend als Elektronik bezeichneten Steuerungs- und Auswerteelektronik 2 mit einer Steuerstufe
3 und einer Verarbeitungsstufe 4 zur lokalen Auswertung der Signale des Melders 1.
Selbstverständlich gibt diese Darstellung nur die einzelnen Funktionsblöcke und nicht den konkreten
apparativen Aufbau der Einrichtung wieder. So werden beispielsweise in der Regel bestimmte
Teile der Elektronik im Melder 1 vorhanden sein. Letzteres gilt insbesondere dann,
wenn im Melder 1 eine Aufbereitung oder Vorauswertung der Meldersignale erfolgt.The device for room monitoring shown in Fig. 1 consists essentially of
a multi-criteria motion detector 1, hereinafter referred to as a detector, and from one
hereinafter referred to as electronics control and
Der Melder 1 besteht aus mindestens einem Bildsensor 5 und mindestens einem nachfolgend
als P/B Dedektor bezeichneten Präsenz- oder Bewegungsdetektor 6. Der Bildsensor 5 ist mit
einem Mittel zur Messung der Beleuchtung im überwachten Raum ausgerüstet. Sowohl dem
Bildsensor 5 als auch dem P/B Detektor 6 ist je eine Vorverarbeitungsstufe 7 bzw. 8 nachgeschaltet,
die aber auch im Melder 1 oder gegebenenfalls in der Verarbeitungsstufe 4 enthalten
sein kann. Von der Vorverarbeitungsstufe 7 und 8 gelangen die Signale in die Verarbeitungsstufe
4, welcher auch das Beleuchtungssignal der im Bildsensor 5 enthaltenen Mittel zur Beleuchtungsmessung
zugeführt ist.The detector 1 consists of at least one image sensor 5 and at least one following
Presence or
Als Option kann der Melder 1 einen Distanzmesser 9 zur Bestimmung der Entfernung der vom
P/B Detektor 6 registrierten Ereignisse enthalten. Die Verarbeitungsstufe 4 ist autonom und
ermöglicht lokale Entscheidungen und/oder die Anzeige der vorn Bildsensor 5 aufgenommenen
Bilder; vorzugsweise ist sie auch zur Übertragung der Bilder an eine räumlich entfernte
Zentrale 10 ausgerüstet, wo dann beispielsweise eine zusätzliche Verifikation erfolgen kann.As an option, the detector 1 can have a distance meter 9 for determining the distance from the
P /
Der P/B Detektor 6 ist ein Bewegungs- oder Präsenzmelder nach einem der bekannten Detektionsprinzipien
Passiv-Infrarot, Aktiv-Infrarot, Mikrowellen, Ultraschall oder einer beliebigen
Kombination davon. Der Bildsensor 5 ist im Bereich des sichtbaren Lichts, im nahen Infrarot
oder im langwelligen Infrarot (Wärmestrahlung) empfindlich; er kann auf einem üblichen bildgebenden
Verfahren (CCD [CCD: charge-coupled device], CID [CID: charge injection device]
oder CMOS [CMOS: complementary metal oxide semiconductor = komplementäre Metall-Oxid-Halbleiter-Struktur])
basieren. The P /
Vorzugsweise wird ein spezieller CMOS-Bildsensor, ein sogenannter APS [APS: Aktiv Pixel Sensor] verwendet, der sich durch einen sehr geringen Stromverbrauch und durch die Möglichkeit des Zugriffs auf einzelne Pixel auszeichnet. Ausserdem können in einem solchen APS zusätzliche applikationsspezifische analoge oder digitale Funktionen, zum Beispiel einfache Bildverarbeitungsalgorithmen wie Filter oder Belichtungssteuerung, einfach integriert werden. Bezüglich APS wird auf die Artikel "A 128 x- 128 CMOS Active Pixel Image Sensor for Highly Integrated Imaging Systems" von Sunetra K. Mendis, Sabrina E. Kennedy und Eric R. Fossum, IEDM 93-538 und "128X128 CMOS Photodiode-Type Active Pixel Sensor With On-Chip Timing, Control and Signal Chain Electronics" von R. H. Nixon, S. E. Kemeny, C. O. Staller und E. R. Fossum in SPIE Vol. 2415/ 117, verwiesen.Preferably, a special CMOS image sensor, a so-called APS [APS: active pixel Sensor] used, which is characterized by a very low power consumption and by the possibility of access to individual pixels. In addition, in such APS additional application-specific analog or digital functions, for example simple Image processing algorithms such as filters or exposure control can be easily integrated. Regarding APS, the article "A 128 x 128 CMOS Active Pixel Image Sensor for Highly Integrated Imaging Systems "by Sunetra K. Mendis, Sabrina E. Kennedy and Eric R. Fossum, IEDM 93-538 and "128X128 CMOS Photodiode-Type Active Pixel Sensor With On-Chip Timing, Control and Signal Chain Electronics "by R.H. Nixon, S.E. Kemeny, C.O. Staller and E. R. Fossum in SPIE Vol. 2415/117.
Der Bildsensor 5 ist auf den zu überwachenden Raum gerichtet, erfasst diesen bildtechnisch, digitalisiert das Bild und legt es als Referenzbild in einem Speicher ab. Wenn der den Bildsensor 5 bildende APS beispielsweise aus 128 mal 128 Pixeln besteht, dann würde bei Verwendung einer Weitwinkeloptik im Abstand von 15 m vor dem Bildsensor 5 einem Pixel eine Fläche von ungefähr 12 mal 12 cm entsprechen. Eine solche Rasterung ist geeignet, menschliche und tierische Gestalten relativ zuverlässig voneinander zu unterscheiden.The image sensor 5 is directed towards the space to be monitored, detects it in terms of image technology, digitizes the image and stores it as a reference image in a memory. If the the image sensor 5 forming APS, for example, consists of 128 by 128 pixels, then would be used a wide-angle lens at a distance of 15 m in front of the image sensor 5 one pixel of approximately 12 by 12 cm. Such a grid is suitable, human and distinguish animal shapes from each other relatively reliably.
Die Möglichkeit der Erkennung eines Menschen im Abstand von 15 m ist sehr vorteilhaft, und die Fläche des überwachten Raums in diesem Erkennungsabstand von etwa 15 mal 15 m ist durchaus realistisch. Im aktiven Zustand der Einrichtung macht dann der Bildsensor 5 in Abständen von Sekundenbruchteilen jeweils ein Bild des überwachten Raums, speichert diese Bilder für eine bestimmte Zeit und vergleicht sie mit dem Referenzbild und/oder untereinander. Die Speicherung der Bilder ist vorzugsweise so gesteuert, dass die Bilder, die einem vom Melder 1 festgestellten Ereignis unmittelbar vorausgehen und/oder diesem unmittelbar folgen, bis auf weiteres gespeichert und dass die restlichen Bilder nach Ablauf der genannten Zeit automatisch gelöscht werden.The possibility of recognizing a person at a distance of 15 m is very advantageous, and the area of the monitored room at this detection distance of about 15 by 15 m quite realistic. In the active state of the device, the image sensor 5 then makes intervals stores a picture of the monitored room from fractions of a second Images for a certain time and compare them with the reference image and / or with each other. The storage of the images is preferably controlled in such a way that the images sent by the detector 1 immediately preceding and / or immediately following the event identified until saved further and that the remaining images automatically after the specified time to be deleted.
Um auch bei schlechten Beleuchtungsverhältnissen noch ein brauchbares Bild machen zu können, ist der Bildsensor 5 auf grosse Lichtempfindlichkeit und einen grossen Dynamikbereich (ausreichende Erkennbarkeit von Einzelheiten bei starkem Hell/ Dunkel-Kontrast) optimiert. Die auf dem APS-Chip integrierten Funktionen erlauben es, einen automatischen elektronischen Verschluss mit einer Dynamik von 1:1000 mitzuintegrieren.In order to make a usable picture even in poor lighting conditions the image sensor 5 is sensitive to light and has a large dynamic range (sufficient recognizability of details with strong light / dark contrast) optimized. The functions integrated on the APS chip allow automatic electronic Integrate closure with a dynamic of 1: 1000.
Der P/B Detektor 6 dient im wesentlichen dazu, die potentiellen Schwächen des Bildsensors 5
auszugleichen. Dazu gehört insbesondere, dass der Bildsensor 5 unterhalb einer kritischen
Beleuchtung keine Bildinformation liefert, und dass auch eine starke Änderung der Bildinformation
gegenüber dem Referenzbild oftmals nicht von einem Eindringling verursacht ist. Man
denke in diesem Zusammenhang beispielsweise an abrupte Beleuchtungsänderungen, die
durch Ein/Ausschalten der Strassenbeleuchtung, vorbeifahrende Fahrzeuge mit aufgeblendeten
Scheinwerfern, Gewitter oder dergleichen verursacht sein können. In diesen und ähnlichen
Fällen wird durch Mitberücksichtigung des Signals des P/B Detektors 6 die Robustheit des
Melders 1 ganz wesentlich erhöht. Diese Mitberücksichtigung wird durch eine kombinierte Auswertung
der Signale des Bildsensors 5 und des P/B Detektors 6 in der Verarbeitungsstufe 4
realisiert.The P /
Es hat sich gezeigt, dass es vorteilhaft ist, die Signale des Bildsensors 5 und des P/B Detektors
6 vor der kombinierten Auswertung einer getrennten Vorauswertung zu unterziehen, welche
in den Vorverarbeitungsstufen 7 bzw. 8 erfolgt. Wie schon erwähnt wurde, können die Vorverarbeitungsstufen
7 und 8 in den jeweiligen Sensor/Detektor 5 bzw. 6 oder in die Verarbeitungsstufe
4 integriert sein. Bei der Vorauswertung werden die Signale des P/B Detektors 6 in
ein zur kombinierten Auswertung mit dem Signal des Bildsensors 5 geeignetes Format umgewandelt
und nach ihrer Stärke klassiert. Falls der Melder 1 einen Distanzmesser 9 enthält,
dann wird dieser bei Vorhandensein eines Signals des P/B Detektors 6 von entsprechender
Stärke von der Verarbeitungsstufe 4 über die Steuerstufe 3 aktiviert und liefert an die Verarbeitungsstufe
eine Information über die Entfernung des soeben detektierten Ereignisses oder
Objekts vom Melder 1. Mit Hilfe dieser Distanzinformation können aus dem Signal des Bildsensors
5 eindeutige Schlüsse auf die Grösse eines detektierten Objekts und damit auf dessen
Natur, wie beispielsweise Mensch oder Tier, gezogen werden.It has been shown that it is advantageous to use the signals from the image sensor 5 and the P /
Beim Bildsensor 5 ist die Vorauswertung als Hardware und/oder in Form eines Prozessorkerns
auf dem APS-Chip integriert. Bei der Vorauswertung der Signale werden die Anzahl der gegenüber
dem Referenzbild geänderten Pixel, ihre Häufung (clustering) und Merkmale der Pixelhäufung
bestimmt. Dabei wird das Referenzbild ständig nachgeführt, wobei festgestellte
Änderungen erst nach Überprüfung ihrer Stabilität in das Referenzbild übernommen werden.
Die Referenzbildnachführung kann dabei durch Einbezug der Signale des P/B Detektors 6
stabiler ausgeführt werden.With the image sensor 5, the pre-evaluation is in the form of hardware and / or in the form of a processor core
integrated on the APS chip. When pre-evaluating the signals, the number of compared
the modified image of the reference image, their clustering and characteristics of the pixel cluster
certainly. The reference image is constantly updated, whereby
Changes are only adopted in the reference image after checking their stability.
The reference image tracking can be done by including the signals of the P /
Am Eingang der Verarbeitungsstufe 4 liegt also ein nach Stärke klassiertes Signal des P/B
Detektors 6, ein Bildsignal des Bildsensors 5 mit Informationen über die Anzahl der geänderten
Pixel und über die Merkmale der Pixelhäufungen und gegebenenfalls ein Signal des Distanzmessers
9, das die Entfernung des das Signal des P/B Detektors 6 auslösenden Ereignisses
angibt. Ausserdem erhält die Verarbeitungsstufe 4 vom Bildsensor 5 laufend Angaben über die
mittlere Beleuchtung im überwachten Raum und gewichtet bei der kombinierten Auswertung
der Signale die Signale des beleuchtungsunabhängigen P/B Detektors 6 umso mehr je schwächer
die Beleuchtung ist. At the input of
Die kombinierte Auswertung der Signale ergibt am Ausgang der Verarbeitungsstufe 4 eine Entscheidung
Alarm oder Nicht-Alarm, wobei diese Entscheidung im wesentlichen den Bildinhalt,
die Gesamtbeleuchtung, die Information vom P/B Detektor 6 und die Änderung und/oder Vorgeschichte
dieser nachfolgend als globale Kriterien bezeichneten Parameter berücksichtigt.
Dabei sind Plausibilitätsverknüpfungen sehr hilfreich: Wenn sich beispielsweise Beleuchtung
und Bildinhalt rasch und stark ändern, das Signal des P/B Detektors 6 aber schwach ist, dann
wird kein Alarm gegeben, sondern es wird die Stabilität des neuen Bildes geprüft und in diesem
nach Bewegungen gesucht. Wenn der P/B Detektor 6 keine Bewegung meldet und nur
eine Beleuchtungs- und/oder Bildänderung stattgefunden hat, dann wurde ziemlich sicher eine
Beleuchtung ein- oder ausgeschaltet, so dass kein Alarmfall vorliegt. Ob tatsächlich ein Beleuchtungswechsel
stattgefunden hat, kann anhand der Stabilität des neuen Bildes leicht überprüft
werden.The combined evaluation of the signals gives a decision at the output of
Die Bildänderungen können in drei Kategorien eingeteilt werden:
- Geringe Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Unterkritische Änderung, die nicht für ein Alarmereignis genügt. Es findet keine weitere Auswertung statt.
- Mittlere Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Es findet eine Detailanalyse statt.
- Grosse Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Es erfolgt zuerst eine Überprüfung der globalen Kriterien und sofern diese keine vernünftige Erklärung liefert, anschliessend eine Detailanalyse.
- Small number of changed pixels in absolute terms or per cluster: subcritical change that is not sufficient for an alarm event. There is no further evaluation.
- Average number of changed pixels in absolute terms or per cluster: A detailed analysis takes place.
- Large number of changed pixels in absolute terms or per cluster: First, the global criteria are checked and, if this does not provide a reasonable explanation, then a detailed analysis.
Die Detailanalyse erfolgt sowohl statisch als auch dynamisch. Im ersten Fall werden die Häufungsbereiche bezüglich Grösse, Topologie und Orientierung untersucht, im zweiten Fall bezüglich der Veränderung von Grösse, Form und Position der Häufungsbereiche.The detailed analysis is carried out both statically and dynamically. In the first case, the cluster areas examined for size, topology and orientation, in the second case regarding the change in size, shape and position of the cluster areas.
Im wesentlichen wird also versucht, aus dem festen Referenzbild bewegte oder sich bewegende Objekte herauszufiltern und diesen dann eine eindeutige, alarmrelevante Kategorie zuzuordnen. So wird beispielsweise der Unterschied zwischen Mensch und Tier am Höhen-/Seitenverhältnis des betreffenden Häufigkeitsbereichs erkannt, wobei bei Menschen die Vertikale und bei Tieren die Horizontale überwiegt. Von vorne ist eine Unterscheidung zwischen Mensch und Tier sehr schwierig; aber man kann davon ausgehen, dass sich das erfasste Objekt nicht frontal auf den Melder 1 zubewegt sondern seitlich ausweicht und dadurch besser erkennbar wird. Neben diesen quantitativen Kriterien für die statische Detailanalyse kann man für die dynamische Detailanalyse typische Bewegungsabläufe von Menschen und Tieren analysieren und abspeichern und die vom Bildsensor 5 festgestellten Veränderungen mit diesen Mustern vergleichen. Essentially, an attempt is made to move or move from the fixed reference image Filter out objects and then assign them a clear, alarm-relevant category. For example, the difference between humans and animals is the height / aspect ratio of the frequency range in question, the vertical and the horizontal predominates in animals. From the front there is a distinction between people and Animal very difficult; but you can assume that the detected object is not frontal moved towards the detector 1 but sidesteps and is therefore easier to see. In addition to these quantitative criteria for static detailed analysis, one can also use dynamic Detailed analysis of typical movements of humans and animals and analyze save and compare the changes detected by the image sensor 5 with these patterns.
Das Flussdiagramm von Fig. 2 zeigt ein einfaches Beispiel der Signalverarbeitung in einer Einrichtung
zur Raumüberwachung ohne Distanzmesser 9 (Fig. 1). Der Einfachheit halber wird bei
der Darstellung davon ausgegangen, dass die Vorverarbeitungsstufen 7 und 8 in die Verarbeitungsstufe
4 (Fig. 1) integriert sind, so dass die Vorverarbeitung der Signale des Bildsensors 5
und des P/B Detektors 6 nicht lokal im betreffenden Sensor beziehungsweise Detektor sondern
in der Verarbeitungsstufe 4 stattfindet.2 shows a simple example of signal processing in a device
for room monitoring without distance meter 9 (Fig. 1). For simplicity's sake
the representation assumed that the preprocessing stages 7 and 8 in the processing stage
4 (FIG. 1) are integrated, so that the preprocessing of the signals of the image sensor 5
and the P /
Darstellungsgemäss erfolgt im Anschluss an die Vorverarbeitung der Sensorsignale eine Entscheidung,
ob die Raumhelligkeit für den Bildsensor 5 ausreichend ist. Ist dies nicht der Fall, ist
also die Raumhelligkeit sehr gering, dann wird nur das Signal des P/B Detektors 6 untersucht.
Bei dieser Untersuchung wird das letztere Signal mit einem Schwellwert P1 verglichen, dessen
Grösse ungefähr der Alarmschwelle eines P/B Detektors des betreffenden Typs entspricht.
Wenn also der PB Detektor 6 ein Passiv-Infrarot-Detektor ist, dann wird der Schwellwert P1
entsprechend der Alarmschwelle eines solchen Passiv-Infrarot-Detektors gewählt. Wenn das
Signal des P/B Detektors 6 grösser als P1 ist, wird Alarm ausgelöst, wenn nicht, dann wird die
Verarbeitung des betreffenden Sensorsignals abgebrochen und der nächste Verarbeitungszyklus
durchgeführt.According to the illustration, a decision is made after the preprocessing of the sensor signals as to whether the room brightness is sufficient for the image sensor 5. If this is not the case, ie if the room brightness is very low, then only the signal from the P /
Wenn die Raumhelligkeit für den Bildsensor 5 ausreichend ist, dann wird die Anzahl der gegenüber
dem Referenzbild veränderten Pixel bestimmt. Ist diese Anzahl null oder sehr klein,
dann wird das Signal des P/B Detektors 6 mit einem Schwellwert P2 mit P2 > P1 verglichen.
Wenn das Signal des P/B Detektors 6 grösser als P2 ist, wird Alarm ausgelöst, wenn nicht,
dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen. Eventuell kann auch
eine Analyse der Signale über ein längeres Zeitintervall erfolgen.If the room brightness is sufficient for the image sensor 5, then the number of pixels changed compared to the reference image is determined. If this number is zero or very small, then the signal of the P /
Wenn die Anzahl der gegenüber dem Referenzbild veränderten Pixel von mittlerer Grösse ist, dann erfolgt eine Detailanalyse mit Berücksichtigung der Beleuchtungssituation mit nachfolgender Untersuchung, ob von beiden Meldern (Bildsensor 5 und P/B Detektor 6) ein Objekt detektiert wurde. Ist dies der Fall, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen.If the number of pixels changed from the reference image is of medium size, then a detailed analysis is carried out taking into account the lighting situation with the following Examination whether an object from both detectors (image sensor 5 and P / B detector 6) was detected. If this is the case, an alarm is triggered, if not, then the processing of the relevant sensor signal canceled.
Wenn die Anzahl der gegenüber dem Referenzbild veränderten Pixel gross ist, dann wird untersucht,
ob eine starke Beleuchtungsänderung stattgefunden hat, was anhand der Beleuchtungsmessung
durch den Bildsensor 5 erfolgt, und zusätzlich das Signal des P/B Detektors 6
kleiner ist ein Schwellwert P3, mit P3 << P1. Sind beide Bedingungen erfüllt, wird die Verarbeitung
des betreffenden Sensorsignal abgebrochen. Sind nicht beide Bedingungen erfüllt, dann
erfolgt eine Detailanalyse mit Berücksichtigung der Beleuchtungssituation mit nachfolgender
Untersuchung, ob von beiden Meldern (Bildsensor 5 und P/B Detektor 6) ein Objekt detektiert
wurde. Ist dies der Fall, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden
Sensorsignals abgebrochen.If the number of pixels changed compared to the reference image is large, then it is examined whether there has been a strong change in lighting, which is done on the basis of the lighting measurement by the image sensor 5, and in addition the signal of the P /
Man erreicht auf die beschriebene Weise eine stark verbesserte Unterscheidung zwischen
Menschen und Haustieren und Menschen und Insekten, womit zwei der hauptsächlichsten
Quellen von Täuschungsalarmen beseitigt sind. Selbstverständlich wird diese Unterscheidung
durch das Distanzsignal des Distanzmessers 7 sprunghaft verbessert, weil dann ein eindeutiger
Rückschluss auf die Grösse des detektierten Objekts möglich ist.A much improved distinction between is achieved in the manner described
Humans and pets and humans and insects, making two of the main ones
Sources of false alarms have been eliminated. Of course, this distinction
suddenly improved by the distance signal of the
Claims (13)
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP98103542A EP0939386A1 (en) | 1998-02-28 | 1998-02-28 | Space surveillance device |
DE59906980T DE59906980D1 (en) | 1998-02-28 | 1999-02-19 | Room surveillance facility |
ES99103260T ES2209257T3 (en) | 1998-02-28 | 1999-02-19 | DEVICE FOR SURVEILLANCE OF AN ENVIRONMENT. |
DK99103260T DK0939387T3 (en) | 1998-02-28 | 1999-02-19 | Room monitoring device |
EP99103260A EP0939387B1 (en) | 1998-02-28 | 1999-02-19 | Room supervision device |
US09/258,731 US6396534B1 (en) | 1998-02-28 | 1999-02-26 | Arrangement for spatial monitoring |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP98103542A EP0939386A1 (en) | 1998-02-28 | 1998-02-28 | Space surveillance device |
Publications (1)
Publication Number | Publication Date |
---|---|
EP0939386A1 true EP0939386A1 (en) | 1999-09-01 |
Family
ID=8231505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP98103542A Withdrawn EP0939386A1 (en) | 1998-02-28 | 1998-02-28 | Space surveillance device |
Country Status (1)
Country | Link |
---|---|
EP (1) | EP0939386A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2650851A1 (en) * | 2012-04-12 | 2013-10-16 | Steinel GmbH | Building automation device |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2064189A (en) * | 1979-11-09 | 1981-06-10 | Ascotts Ltd | Surveillance System |
EP0543148A1 (en) * | 1991-11-21 | 1993-05-26 | GRUNDIG E.M.V. Elektro-Mechanische Versuchsanstalt Max Grundig GmbH & Co. KG | Method and device for detecting changes in a video image |
US5229850A (en) * | 1990-07-30 | 1993-07-20 | Kabushiki Kaisha Toshiba | Video monitoring system including a memory for storing and transmitting a video signal immediately following the occurrence of an event |
DE29607184U1 (en) * | 1995-04-27 | 1996-07-18 | Frauhammer Alfred | Hazard detection system with video surveillance |
WO1997006453A1 (en) * | 1995-08-04 | 1997-02-20 | Joseph Lai | Motion detection imaging device and method |
DE29718213U1 (en) * | 1997-10-14 | 1997-12-04 | Waldmann Guenter Dipl Ing | Device for automatic, intelligent monitoring |
-
1998
- 1998-02-28 EP EP98103542A patent/EP0939386A1/en not_active Withdrawn
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2064189A (en) * | 1979-11-09 | 1981-06-10 | Ascotts Ltd | Surveillance System |
US5229850A (en) * | 1990-07-30 | 1993-07-20 | Kabushiki Kaisha Toshiba | Video monitoring system including a memory for storing and transmitting a video signal immediately following the occurrence of an event |
EP0543148A1 (en) * | 1991-11-21 | 1993-05-26 | GRUNDIG E.M.V. Elektro-Mechanische Versuchsanstalt Max Grundig GmbH & Co. KG | Method and device for detecting changes in a video image |
DE29607184U1 (en) * | 1995-04-27 | 1996-07-18 | Frauhammer Alfred | Hazard detection system with video surveillance |
WO1997006453A1 (en) * | 1995-08-04 | 1997-02-20 | Joseph Lai | Motion detection imaging device and method |
DE29718213U1 (en) * | 1997-10-14 | 1997-12-04 | Waldmann Guenter Dipl Ing | Device for automatic, intelligent monitoring |
Non-Patent Citations (1)
Title |
---|
NIXON R H ET AL: "128X128 CMOS PHOTODIODE-TYPE ACTIVE PIXEL SENSOR WITH ON-CHIP TIMING, CONTROL AND SIGNAL CHAIN ELECTRONICS", PROCEEDINGS OF THE SPIE, vol. 2415, 6 February 1995 (1995-02-06), pages 117 - 123, XP000675532 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2650851A1 (en) * | 2012-04-12 | 2013-10-16 | Steinel GmbH | Building automation device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP0939387B1 (en) | Room supervision device | |
EP0973137B1 (en) | Motion detector | |
DE69815977T2 (en) | AGAINST GLOBAL CHANGES IN NON-SENSITIVE VIDEO MOTION DETECTOR | |
DE3634628C2 (en) | ||
DE60132622T2 (en) | METHOD AND DEVICE FOR SELECTING THE BEST VIDEO IMAGE FOR TRANSMISSION TO A REMOTE SITE WITHIN A CLOSED TELEVISION SYSTEM FOR RESIDENTIAL AREA SAFETY MONITORING | |
DE69921237T2 (en) | Automatic video surveillance system | |
DE3841387C2 (en) | ||
EP0986912B1 (en) | Method for surveying a predetermined surveillance area | |
DE60213715T2 (en) | Image surveillance apparatus, method and processing program | |
EP3058556B1 (en) | Method and device for the automated early detection of forest fires by means of the optical detection of clouds of smoke | |
EP0107042B1 (en) | Infrared detector for spotting an intruder in an area | |
DE60204671T2 (en) | AUTOMATIC SYSTEM FOR MONITORING PERSONS ENTERING AND LEAVING AN APPROACH | |
DE69731797T2 (en) | Device for determining the number of passers-by | |
DE4222920A1 (en) | IMAGE PROCESSING USING SURVEILLANCE MONITORING SYSTEM | |
EP1346330B1 (en) | Video smoke detection system | |
DE4430016A1 (en) | Image evaluation system for security and alarm system | |
EP1496483B1 (en) | Method and apparatus for the detection of flames | |
DE60123214T2 (en) | SMOKE AND FLAME DETECTION | |
DE3842356A1 (en) | System for detecting a movement or a change in the surveillance area of a number of television cameras | |
EP0543148B1 (en) | Method and device for detecting changes in a video image | |
EP1376502A1 (en) | Surveillance system | |
DE60319346T2 (en) | SENSOR WITH DETECTION OF COVERS | |
EP0817145A1 (en) | Infrared sensor | |
DE4220508A1 (en) | System for detecting persons in access regions - has motion sensitive detector arrangement with passive IR detector, evaluation circuit driving counter with directional balancing, thermal detector and logic circuit correcting direction-dependent person count | |
DE10049366A1 (en) | Security area monitoring method involves using two image detection units whose coverage areas overlap establishing monitored security area |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): AT BE CH DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE |
|
AX | Request for extension of the european patent |
Free format text: AL;LT;LV;MK;RO;SI |
|
AKX | Designation fees paid | ||
REG | Reference to a national code |
Ref country code: DE Ref legal event code: 8566 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN |
|
18D | Application deemed to be withdrawn |
Effective date: 20000401 |