EP0543148A1 - Method and device for detecting changes in a video image - Google Patents

Method and device for detecting changes in a video image Download PDF

Info

Publication number
EP0543148A1
EP0543148A1 EP92117686A EP92117686A EP0543148A1 EP 0543148 A1 EP0543148 A1 EP 0543148A1 EP 92117686 A EP92117686 A EP 92117686A EP 92117686 A EP92117686 A EP 92117686A EP 0543148 A1 EP0543148 A1 EP 0543148A1
Authority
EP
European Patent Office
Prior art keywords
alarm
fields
brightness
quotient
change
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP92117686A
Other languages
German (de)
French (fr)
Other versions
EP0543148B1 (en
Inventor
Rainer Dipl.-Ing. Grundig E.M.V. Rumland
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Grundig EMV Elektromechanische Versuchsanstalt Max Grundig GmbH
Original Assignee
Grundig EMV Elektromechanische Versuchsanstalt Max Grundig GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Grundig EMV Elektromechanische Versuchsanstalt Max Grundig GmbH filed Critical Grundig EMV Elektromechanische Versuchsanstalt Max Grundig GmbH
Publication of EP0543148A1 publication Critical patent/EP0543148A1/en
Application granted granted Critical
Publication of EP0543148B1 publication Critical patent/EP0543148B1/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19652Systems using zones in a single scene defined for different treatment, e.g. outer zone gives pre-alarm, inner zone gives alarm

Definitions

  • the invention relates to a method for detecting changes in the image content of video images and an arrangement for performing the method.
  • Such methods and arrangements are used in video surveillance systems, which have the task of monitoring a specific area for changes, in particular for movements, and to output an alarm signal in the event of a detected change, false alarms being largely excluded.
  • a system for the detection of changes or movements in an area monitored by a television camera is known from the German published patent application DE 27 15 083 A1.
  • movements or changes in the monitored area are recognized by discrimination of a video signal recorded by a television camera.
  • the television picture obtained is divided into several fields, which are evaluated individually in an alarm device.
  • One of these freely selectable fields in size and location is intended to suppress an alarm triggering by the evaluation result of one or more of the other fields if a change in brightness occurs in this field.
  • Such a system largely avoids the triggering of a false alarm, but a false alarm is nevertheless triggered when the brightness changes, which encompasses almost the entire image area but not the selected field.
  • the alarm is suppressed if a change in the selected field is detected at the same time.
  • An image sensor system for the detection of changes is known from the European patent EP 0 183 106 B1, in which a currently recorded image is compared with a plurality of stored images.
  • the stored images contain normal changes, ie changes in the image content that should not trigger an alarm.
  • This system a large number of changes that are not relevant to the alarm can be saved, thus reducing the likelihood of a false alarm being triggered, but with an increasing number of images to be compared, the processing time or the computing power required for the evaluation system also increases.
  • alarm-relevant changes that are similar to non-alarm-relevant changes are not recognized or that general changes, for example certain changes in the lighting conditions in the monitored area, lead to false alarms if they do not match a stored image.
  • An improvement in the evaluation reliability is achieved by dividing the recorded video image into a large number of fields, it being possible for one field to consist of only one pixel, depending on the complexity.
  • a brightness value is determined integrally in each field and compared with the stored value of a corresponding field from a previous video image. If there is a change that exceeds a certain limit value, it is assumed that an alarm-relevant object has entered.
  • This evaluation also requires a limited adjustment to existing or changing lighting conditions given by comparing an integral mean value of video images taken at a certain time interval and predetermined tolerance limits do not immediately trigger the alarm in the event of minor changes. In the case of rapid changes, for example due to passing clouds which cause shadowing, a false alarm is triggered in these known systems.
  • the object of the invention is to provide a video control system in which there is reliable suppression of false alarms and at the same time reliable detection of alarm-relevant changes.
  • This object is achieved according to the invention in that, in the case of a currently recorded video image which is divided into a plurality of fields and in which a brightness value is determined integrally for each field, the quotient of this brightness value and the brightness value of the corresponding field from one previous picture is formed. If there is a change in brightness, the quotient is not 1, while the quotient is 1 if there is no change in brightness. In the event of a change that is not relevant to the alarm, for example a large change in the lighting conditions, the change in brightness is recognized as not relevant to the alarm if the quotients of the individual fields have the same value. If there are additional changes during a large-scale change in brightness due to alarm-relevant movements caused by an object or person entering the monitored area, the quotient in this or these fields differs from the others. So an alarm is triggered.
  • the advantage of the method according to the invention is that an alarm-relevant change in the image content is detected at all times.
  • the difference between a current and a previous image is usually formed.
  • a bright object then has, for example, a brightness value of 100, a dark object of 10. Due to a general change in the lighting conditions, for example, the brightness value of the bright object drops to 80, and that of the dark object accordingly to 8.
  • the difference is formed, a value of 20 for the light and a value of 2 for the dark object.
  • a difference value for an intruded, alarm-relevant object can be 10, for example.
  • alarm detection cannot be carried out without any doubt. Either a false alarm is accepted or the alarm is given interrupted when there is a large change in brightness, in the second case the alarm-relevant change does not lead to the alarm being given.
  • a quotient of 1.25 results for both the light and the dark object, while a quotient which differs from this is obtained for an penetrated object, since an additional factor is incorporated into the quotient formation by the movement.
  • An advantageous embodiment of the invention results from the specification of a limit range for the quotient from the current brightness value of a field and the corresponding brightness value of the field from a previous image. In this case, a change in brightness is only recognized when this limit range is exceeded or undershot. By specifying this limit range, possible false alarms are suppressed by small fluctuations in the image brightness, which do not affect all fields, or by image noise.
  • color information is used to form the quotient. In this way it is achieved that alarm-relevant changes in the image content, which only affect the color, but not the brightness, are recognized.
  • FIG. 1 shows an area to be monitored with buildings 1 and 2 and a vehicle 3.
  • Vehicle 3 is assumed to be moving.
  • the position of the vehicle in the current picture is shown by a dashed line
  • the position in one previous picture is represented by the solid line.
  • Quotient values are entered in the buildings as well as in the individual parts of the building and in the vehicle. These values are, for example, 1.0 if the conditions remain the same or 1.4 if there is a general change in brightness between the current image and a previous image.
  • the area in which there is a change due to the movement of the vehicle is shown hatched in the figure. In this area, a deviating quotient of, for example, 1.2 is determined for otherwise constant conditions, or 1.6 for a general change in brightness. In both cases there is a quotient that differs from the rest of the picture, which indicates an alarm-relevant change and thus leads to the alarm being triggered.
  • FIG. 2 shows an arrangement for carrying out the method according to the invention.
  • This arrangement contains a surveillance camera 11, the video signal of which is fed to a functional unit for averaging 12 for the specific fields.
  • the mean values obtained are given to the functional unit for forming the quotient 15.
  • Corresponding values of a previous image are also given from the memory 13 to the functional unit for forming the quotient 15.
  • the quotients obtained are checked in the evaluation unit 16. The check concerns the comparison of the quotients obtained from the individual fields and recognizes deviations of quotients of one or fewer fields from the general average value which is formed from all fields of an image.
  • a limit value of the deviation from the average value can be taken into account in the comparison, so that an alarm is not triggered when there are slight fluctuations that are not relevant to the alarm.
  • the alarm signaling unit 17 is activated, which emits an acoustic and / or a visual alarm signal.
  • the arrangement also contains a control unit 14, by which the sequence process is controlled. This control unit 14 is coupled to the other functional blocks; the individual connections are not shown in FIG. 2.
  • the memory 13 is advantageously designed in such a way that the mean value data of several previous images can be stored in it. In this way it is achieved that there is greater flexibility with regard to the selection of a previous image in the evaluation, in particular the time intervals of the images to be compared can be varied within certain limits.

Abstract

Such methods and arrangements are used in video surveillance systems which monitor a certain area for changes. It is the object of the invention to specify a video control system providing reliable suppression of false alarms and, at the same time, reliable detection of alarm-relevant changes. This is achieved by the fact that in a currently recorded video image which is divided into a multiplicity of fields and in which a brightness value is integrally determined for each field, the quotient of this brightness value and the brightness value of the corresponding field from a preceding image is formed. When an alarm-relevant change is not present, the quotient is approximately equal in all fields whilst the quotient deviates from the other ones in the case of alarm-relevant changes in the relevant fields. <IMAGE>

Description

Die Erfindung betrifft ein Verfahren zur Erkennung von Veränderungen des Bildinhaltes von Videobildern und eine Anordnung zur Durchführung des Verfahrens.The invention relates to a method for detecting changes in the image content of video images and an arrangement for performing the method.

Derartige Verfahren und Anordnungen werden in Videoüberwachungssystemen eingesetzt, die die Aufgabe haben ein bestimmtes Gebiet auf Veränderungen, insbesondere auf Bewegungen, hin zu überwachen, und im Fall einer erkannten Veränderung ein Alarmsignal auszugeben, wobei Fehlalarme weitgehend ausgeschlossen werden sollen.Such methods and arrangements are used in video surveillance systems, which have the task of monitoring a specific area for changes, in particular for movements, and to output an alarm signal in the event of a detected change, false alarms being largely excluded.

Ein System zum Erkennen von Veränderungen bzw. Bewegungen in einem von einer Fernsehkamera überwachten Gebiet ist aus der deutschen Offenlegungsschrift DE 27 15 083 A1 bekannt. Dort werden Bewegungen bzw. Veränderungen im überwachten Bereich durch Diskrimination eines von einer Fernsehkamera aufgenommenen Videosignales erkannt. Zur Vermeidung von Fehlalarmen durch allgemeine Helligkeitsänderungen wird das erhaltene Fernsehbild in mehrere Felder unterteilt, die einzeln in einer Alarmeinrichtung ausgewertet werden. Eines dieser in Größe und Lage frei wählbaren Felder ist dazu bestimmt, eine Alarmauslösung durch das Auswerteergebnis ein oder mehrerer der übrigen Felder zu unterdrücken, wenn eine Helligkeitsänderung in diesem Feld auftritt. Durch ein derartiges System wird zwar die Auslösung eines Fehlalarmes weitgehend vermieden, aber bei einer Helligkeitsänderung, die zwar nahezu den gesamten Bildbereich umfaßt, jedoch nicht das ausgewählte Feld, wird trotzdem ein Fehlalarm ausgelöst. Weiterhin wird im Fall einer alarmrelevanten Änderung die Alarmgabe unterdrückt, wenn gleichzeitig eine Veränderung im ausgewählten Feld erkannt wird.A system for the detection of changes or movements in an area monitored by a television camera is known from the German published patent application DE 27 15 083 A1. There, movements or changes in the monitored area are recognized by discrimination of a video signal recorded by a television camera. To avoid false alarms due to general changes in brightness, the television picture obtained is divided into several fields, which are evaluated individually in an alarm device. One of these freely selectable fields in size and location is intended to suppress an alarm triggering by the evaluation result of one or more of the other fields if a change in brightness occurs in this field. Such a system largely avoids the triggering of a false alarm, but a false alarm is nevertheless triggered when the brightness changes, which encompasses almost the entire image area but not the selected field. Furthermore, in the event of an alarm-relevant change, the alarm is suppressed if a change in the selected field is detected at the same time.

Aus der europäischen Patentschrift EP O 183 106 B1 ist ein Bildsensorsystem zur Detektion von Änderungen bekannt, bei dem ein aktuell aufgenommenes Bild mit einer Mehrzahl von abgespeicherten Bildern verglichen wird. Die abgespeicherten Bilder beinhalten normale Änderungen, d.h. Änderungen des Bildinhalts, die keine Alarmauslösung hervorrufen sollen. Bei diesem System können zwar eine Vielzahl von nicht alarmrelevanten Änderungen abgespeichert werden und somit die Wahrscheinlichkeit einer Fehlalarmauslösung reduziert werden, aber mit zunehmender Anzahl der zu vergleichenden, abgespeicherten Bilder erhöht sich auch die Verarbeitungszeit bzw. die benötigte Rechenleistung des Auswertesystems. Ferner besteht die Möglichkeit, daß alarmrelevante Änderungen, die Ähnlichkeit mit nicht alarmrelevanten Änderungen haben, nicht erkannt werden oder allgemeine Änderungen, beispielsweise bestimmte Änderungen der Lichtverhältnisse im überwachten Gebiet, zu Fehlalarmen führen, wenn sie nicht mit einem abgespeicherten Bild übereinstimmen.An image sensor system for the detection of changes is known from the European patent EP 0 183 106 B1, in which a currently recorded image is compared with a plurality of stored images. The stored images contain normal changes, ie changes in the image content that should not trigger an alarm. With this system, a large number of changes that are not relevant to the alarm can be saved, thus reducing the likelihood of a false alarm being triggered, but with an increasing number of images to be compared, the processing time or the computing power required for the evaluation system also increases. There is also the possibility that alarm-relevant changes that are similar to non-alarm-relevant changes are not recognized or that general changes, for example certain changes in the lighting conditions in the monitored area, lead to false alarms if they do not match a stored image.

Aus der deutschen Offenlegungsschrift DE 38 42 356 A1 ist ein System zum Feststellen einer Bewegung bzw. einer Veränderung im Überwachungsbereich mehrerer Fernsehkameras bekannt, bei dem jeweils das Bild einer Fernsehkamera analysiert wird, indem das aktuelle Bild mit einem vorangegangenen Bild verglichen wird. Dazu wird der Bildinhalt zeilenweise überprüft, wobei zu jeder Zeile ein Mittelwert aus Bildinformationen gebildet wird. Für alle Bildpunkte wird eine Sollabweichung von der jeweiligen Bildinformation vorgegeben und die Gesamtzahl der Bildpunkte des aktuellen Bildes, die die vorgegebene Sollabweichung überschreitet, wird mit der entsprechenden Gesamtzahl der Bildpunkte des gespeicherten Bildinhaltes verglichen und gegebenenfalls Alarm ausgelöst. Durch die zeilenweise Mittelwertbildung wird zwar in eingeschränktem Umfang eine Anpassung an wechselnde Lichtverhältnisse erreicht, jedoch führt die Mittelwertbildung auch zu Unsicherheiten bezüglich einer sicheren Erkennung von alarmrelevanten Veränderungen.From the German published patent application DE 38 42 356 A1 a system for determining a movement or a change in the surveillance area of several television cameras is known, in which the image of a television camera is analyzed in each case by comparing the current image with a previous image. For this purpose, the image content is checked line by line, an average value being formed from image information for each line. A target deviation from the respective image information is specified for all pixels, and the total number of pixels of the current image that exceeds the specified target deviation is compared with the corresponding total number of pixels of the stored image content and an alarm is triggered if necessary. The line-by-line averaging adapts to changing lighting conditions to a limited extent, but the averaging also leads to uncertainties with regard to the reliable detection of alarm-relevant changes.

Eine Verbesserung in der Auswertesicherheit wird erreicht, indem das aufgenommene Videobild in eine Vielzahl von Feldern unterteilt wird, wobei je nach Aufwand ein Feld auch aus nur einem Bildpunkt bestehen kann. In jedem Feld wird ein Helligkeitswert integral bestimmt und mit dem gespeicherten Wert eines entsprechenden Feldes aus einem vorhergehenden Videobild verglichen. Liegt eine Veränderung vor, die einen bestimmten Grenzwert überschreitet, geht man davon aus, daß ein alarmrelevantes Objekt eingedrungen ist. Auch bei dieser Auswertung ist eine begrenzte Anpassung an bestehende bzw. sich verändernde Lichtverhältnisse gegeben, indem jeweils ein integraler Mittelwert von in gewissem Zeitabstand aufgenommenen Videobildern verglichen wird und vorgegebene Toleranzgrenzen bei kleineren Änderungen nicht unmittelbar zur Alarmauslösung führen. Bei schnellen Änderungen, beispielsweise durch vorüberziehende Wolken, die eine Schattenbildung verursachen, wird jedoch bei diesen bekannten Systemen ein Fehlalarm ausgelöst.An improvement in the evaluation reliability is achieved by dividing the recorded video image into a large number of fields, it being possible for one field to consist of only one pixel, depending on the complexity. A brightness value is determined integrally in each field and compared with the stored value of a corresponding field from a previous video image. If there is a change that exceeds a certain limit value, it is assumed that an alarm-relevant object has entered. This evaluation also requires a limited adjustment to existing or changing lighting conditions given by comparing an integral mean value of video images taken at a certain time interval and predetermined tolerance limits do not immediately trigger the alarm in the event of minor changes. In the case of rapid changes, for example due to passing clouds which cause shadowing, a false alarm is triggered in these known systems.

Eine Verbesserung in Bezug auf die Unterdrückung von Fehlalarmen ist gegeben, indem die Alarmgebung unterdrückt wird, wenn eine großflächige Änderung eintritt, d.h. wenn der überwiegende Anteil der ausgewerteten Felder eine Änderung erfährt, die über die Toleranzgrenzen hinaussgeht. In diesem Fall wird davon ausgegangen, daß sich die Lichtverhältnisse geändert haben. Durch diese Art der Alarmunterdrückung entsteht jedoch der Nachteil, daß während der Zeit der Alarmunterdrückung auch eine alarmrelevante Veränderung nicht erkannt werden kann.There is an improvement in the suppression of false alarms by suppressing the alarm when a large-scale change occurs, i.e. if the majority of the evaluated fields undergoes a change that goes beyond the tolerance limits. In this case it is assumed that the lighting conditions have changed. This type of alarm suppression, however, has the disadvantage that an alarm-relevant change cannot be detected during the alarm suppression time.

Aufgabe der Erfindung ist es, ein Videokontrollsystem anzugeben, bei dem eine sichere Unterdrückung von Fehlalarmen und gleichzeitig eine sichere Erkennung von alarmrelevanten Veränderungen gegeben ist.The object of the invention is to provide a video control system in which there is reliable suppression of false alarms and at the same time reliable detection of alarm-relevant changes.

Diese Aufgabe wird gemäß der Erfindung gelöst, indem bei einem aktuell aufgenommenen Videobild, das in eine Vielzahl von Feldern unterteilt wird, und bei dem für jedes Feld ein Helligkeitswert integral bestimmt wird, der Quotient aus diesem Helligkeitswert und dem Helligkeitswert des entsprechenden Feldes aus einem vorangegangenen Bild gebildet wird. Bei Vorliegen einer Helligkeitsänderung ist der Quotient ungleich 1, während der Quotient gleich 1 ist, wenn keine Helligkeitsänderung vorliegt.
Bei einer nicht alarmrelevanten Änderung, beispielsweise einer großflächigen Änderung der Lichtverhältnisse, wird die Helligkeitsänderung als nicht alarmrelevant erkannt, wenn die Quotienten der einzelnen Felder den gleichen Wert haben. Ergeben sich während einer großflächigen Helligkeitsänderung zusätzlich Änderungen auf Grund von alarmrelevanten Bewegungen durch einen in das überwachte Gebiet eindringenden Gegenstand oder eine eindringende Person, unterscheidet sich der Quotient in diesem oder diesen Feldern von den übrigen. Es wird also ein Alarm ausgelöst.
This object is achieved according to the invention in that, in the case of a currently recorded video image which is divided into a plurality of fields and in which a brightness value is determined integrally for each field, the quotient of this brightness value and the brightness value of the corresponding field from one previous picture is formed. If there is a change in brightness, the quotient is not 1, while the quotient is 1 if there is no change in brightness.
In the event of a change that is not relevant to the alarm, for example a large change in the lighting conditions, the change in brightness is recognized as not relevant to the alarm if the quotients of the individual fields have the same value. If there are additional changes during a large-scale change in brightness due to alarm-relevant movements caused by an object or person entering the monitored area, the quotient in this or these fields differs from the others. So an alarm is triggered.

Der Vorteil des erfindungsgemäßen Verfahrens liegt darin, daß zu jedem Zeitpunkt eine alarmrelevante Änderung im Bildinhalt erkannt wird. Bei den bekannten Verfahren wird meist die Differenz zwischen einem aktuellen und einem vorangegangenen Bild gebildet. Ein helles Objekt hat dann beispielsweise einen Helligkeitswert von 100, ein dunkles Objekt von 10. Durch eine allgemeine Änderung der Lichtverhältnisse fällt beispielsweise der Helligkeitswert des hellen Objektes auf 80, der des dunklen Objektes entsprechend auf 8. Bildet man die Differenz erhält man einen Wert von 20 für das helle und einen Wert von 2 für das dunkle Objekt. Ein Differenzwert für ein eingedrungenes, alarmrelevantes Objekt kann beispielsweise bei 10 liegen. Folglich kann eine Alarmerkennung nicht zweifelsfrei erfolgen. Entweder wird ein Fehlalarm in Kauf genommen oder die Alarmgabe bei einer großflächigen Helligkeitsänderung unterbrochen, wobei im zweiten Fall die alarmrelevante Änderung nicht zur Alarmgabe führt.The advantage of the method according to the invention is that an alarm-relevant change in the image content is detected at all times. In the known methods, the difference between a current and a previous image is usually formed. A bright object then has, for example, a brightness value of 100, a dark object of 10. Due to a general change in the lighting conditions, for example, the brightness value of the bright object drops to 80, and that of the dark object accordingly to 8. If the difference is formed, a value of 20 for the light and a value of 2 for the dark object. A difference value for an intruded, alarm-relevant object can be 10, for example. As a result, alarm detection cannot be carried out without any doubt. Either a false alarm is accepted or the alarm is given interrupted when there is a large change in brightness, in the second case the alarm-relevant change does not lead to the alarm being given.

Beim erfindungsgemäßen Verfahren ergibt sich sowohl für das helle als auch für das dunkle Objekt ein Quotient von 1.25, während sich für ein eingedrungenes Objekt ein dazu unterschiedlicher Quotient ergibt, da durch die Bewegung ein zusätzlicher Faktor in die Quotientenbildung mit einfließt.In the method according to the invention, a quotient of 1.25 results for both the light and the dark object, while a quotient which differs from this is obtained for an penetrated object, since an additional factor is incorporated into the quotient formation by the movement.

Eine vorteilhafte Ausgestaltung der Erfindung ergibt sich durch die Vorgabe eines Grenzbereiches für den Quotienten aus dem aktuellen Helligkeitswert eines Feldes und dem entsprechenden Helligkeitswert des Feldes aus einem vorhergehenden Bild. In diesem Fall wird eine Helligkeitsänderung erst dann erkannt, wenn dieser Grenzbereich über- oder unterschritten wird. Durch die Vorgabe dieses Grenzbereiches werden mögliche Fehlalarme durch kleinere Schwankungen in der Bildhelligkeit, die nicht alle Felder betreffen, oder durch Bildrauschen unterdrückt.An advantageous embodiment of the invention results from the specification of a limit range for the quotient from the current brightness value of a field and the corresponding brightness value of the field from a previous image. In this case, a change in brightness is only recognized when this limit range is exceeded or undershot. By specifying this limit range, possible false alarms are suppressed by small fluctuations in the image brightness, which do not affect all fields, or by image noise.

Eine vorteilhafte Weiterbildung ergibt sich auch durch die Bildung eines Mittelwertes aller unauffälligen Quotienten, von dem ausgehend ein Grenzbereich ermittelt wird, bei dessen Überschreiten eine relevante Änderung erkannt wird. Diese Mittelwertbildung ist insbesondere bei großflächigen Bildänderungen von Vorteil, da nicht in allen Feldern exakt die gleiche relative Änderung eintritt.An advantageous further development also results from the formation of an average of all inconspicuous quotients, from which a limit range is determined, beyond which a relevant change is recognized. This averaging is particularly advantageous in the case of large-area image changes, since not exactly the same relative change occurs in all fields.

In einer anderen vorteilhaften Weiterbildung der Erfindung werden mehrere Felder zu jeweils einem Bereich zusammengefaßt. Auf diese Weise entstehen mehrere Bereiche, von denen jeder für sich ausgewertet wird. Dementsprechend kann für jeden dieser Bereiche bei Vorliegen einer alarmrelevanten Änderung ein Alarmsignal ausgegeben werden, das diesem Bereich entspricht. Durch diese Zuordnung kann in vorteilhafter Weise das mit einer Videokamera überwachte Gebiet in mehrere Bereiche aufgeteilt werden, so daß bei einer Alarmgabe der Bereich, in dem eine alarmrelevante Änderung aufgetreten ist, erkennbar ist.In another advantageous development of the invention, several fields are combined into one area each. In this way, several areas are created, each of which is evaluated individually. Accordingly, an alarm signal corresponding to this area can be output for each of these areas when there is an alarm-relevant change. By means of this assignment, the area monitored by a video camera can advantageously be divided into several areas, so that the area in which an alarm-relevant change has occurred can be identified when an alarm is given.

In einer weiteren Ausbildung der Erfindung werden anstelle der Helligkeitsinformation oder zusätzlich zur Helligkeitsinformation Farbinformationen zur Quotientenbildung herangezogen. Auf diese Weise wird erreicht, daß auch alarmrelevante Veränderungen des Bildinhaltes, die nur die Farbe, nicht aber die Helligkeit betreffen, erkannt werden.In a further embodiment of the invention, instead of the brightness information or in addition to the brightness information, color information is used to form the quotient. In this way it is achieved that alarm-relevant changes in the image content, which only affect the color, but not the brightness, are recognized.

Im weiteren wird die Erfindung an Hand der Figuren 1 und 2 näher beschrieben.

Figur 1
zeigt ein zu überwachendes Gebiet,
Figur 2
zeigt ein Ausführungsbeispiel der erfindungsgemäßen Vorrichtung.
The invention is described in more detail below with reference to FIGS. 1 and 2.
Figure 1
shows an area to be monitored,
Figure 2
shows an embodiment of the device according to the invention.

In Figur 1 ist ein zu überwachendes Gebiet mit den Gebäuden 1 und 2, sowie einem Fahrzeug 3 dargestellt. Vom Fahrzeug 3 wird angenommen, daß es sich bewegt. Die Lage des Fahrzeugs im aktuellen Bild ist durch eine gestrichelte Linie dargestellt, die Lage in einem vorhergehenden Bild ist durch die durchgehende Linie dargestellt. In die Gebäude, sowie in den einzelnen Gebäudeteilen, und im Fahrzeug sind Quotientenwerte eingetragen. Diese Werte sind beispielsweise 1,0 bei gleichbleibenden Verhältnissen bzw. 1,4 bei bei einer allgemeinen Helligkeitsänderung zwischen dem aktuellen Bild und einem vorangegangenem Bild. Der Bereich, in dem sich durch die Bewegung des Fahrzeuges eine Veränderung ergibt, ist in der Figur schraffiert dargestellt. In diesem Bereich wird ein abweichender Quotient von beispielsweise 1,2 bei sonst gleichbleibenden Verhältnissen, bzw. von 1,6 bei einer allgemeinen Helligkeitsänderung ermittelt. In beiden Fällen ergibt sich ein vom übrigen Bild unterschiedlicher Quotient, der auf eine alarmrelevante Veränderung hinweist und somit zur Alarmauslösung führt.FIG. 1 shows an area to be monitored with buildings 1 and 2 and a vehicle 3. Vehicle 3 is assumed to be moving. The position of the vehicle in the current picture is shown by a dashed line, the position in one previous picture is represented by the solid line. Quotient values are entered in the buildings as well as in the individual parts of the building and in the vehicle. These values are, for example, 1.0 if the conditions remain the same or 1.4 if there is a general change in brightness between the current image and a previous image. The area in which there is a change due to the movement of the vehicle is shown hatched in the figure. In this area, a deviating quotient of, for example, 1.2 is determined for otherwise constant conditions, or 1.6 for a general change in brightness. In both cases there is a quotient that differs from the rest of the picture, which indicates an alarm-relevant change and thus leads to the alarm being triggered.

In Figur 2 ist eine Anordnung zur Durchführung des erfindungsgemäßen Verfahrens dargestellt. Diese Anordnung enthält eine Überwachungskamera 11, deren Videosignal an eine Funktionseinheit zur Mittelwertbildung 12 für die bestimmten Felder zugeführt wird. Die erhaltenen Mittelwerte werden an die Funktionseinheit zur Quotientenbildung 15 gegeben. Weiterhin werden entsprechende Werte eines vorangegangenen Bildes aus dem Speicher 13 an die Funktionseinheit zur Quotientenbildung 15 gegeben. Die erhaltenen Quotienten werden in der Auswerteeinheit 16 überprüft. Die Überprüfung betrifft den Vergleich der von den einzelnen Feldern erhaltenen Quotienten und erkennt Abweichungen von Quotienten eines oder weniger Felder vom allgemeinen Durchschnittswert, der aus allen Feldern eines Bildes gebildet wird. Weiterhin kann bei dem Vergleich ein Grenzwert der Abweichung vom Durchschnittswert berücksichtigt werden, so daß eine Alarmauslösung bei geringfügigen Schwankungen, die nicht alarmrelevant sind, nicht stattfindet. Im Falle einer Abweichung über den Grenzwert hinaus wird die Alarmgabeeinheit 17 angesteuert, die ein akustisches und/oder ein visuelles Alarmsignal ausgibt. Die Anordnung enthält weiterhin eine Steuereinheit 14, von der der Ablaufvorgang gesteuert wird. Diese Steuereinheit 14 ist mit den übrigen Funktionsblöcken gekoppelt, die einzelnen Verbindungen sind in der Figur 2 nicht dargestellt.FIG. 2 shows an arrangement for carrying out the method according to the invention. This arrangement contains a surveillance camera 11, the video signal of which is fed to a functional unit for averaging 12 for the specific fields. The mean values obtained are given to the functional unit for forming the quotient 15. Corresponding values of a previous image are also given from the memory 13 to the functional unit for forming the quotient 15. The quotients obtained are checked in the evaluation unit 16. The check concerns the comparison of the quotients obtained from the individual fields and recognizes deviations of quotients of one or fewer fields from the general average value which is formed from all fields of an image. Furthermore, a limit value of the deviation from the average value can be taken into account in the comparison, so that an alarm is not triggered when there are slight fluctuations that are not relevant to the alarm. In the event of a deviation beyond the limit value, the alarm signaling unit 17 is activated, which emits an acoustic and / or a visual alarm signal. The arrangement also contains a control unit 14, by which the sequence process is controlled. This control unit 14 is coupled to the other functional blocks; the individual connections are not shown in FIG. 2.

Der Speicher 13 ist in vorteilhafter Weise so ausgeführt, daß in ihm die Mittelwertdaten mehrerer vorangegangener Bilder gespeichert werden können. Auf diese Weise wird erreicht, daß bei der Auswertung eine größere Flexibilität bezüglich der Wahl eines vorangegangenen Bildes gegeben ist, insbesondere können die Zeitabstände der zu vergleichenden Bilder innerhalb bestimmter Grenzen variiert werden.The memory 13 is advantageously designed in such a way that the mean value data of several previous images can be stored in it. In this way it is achieved that there is greater flexibility with regard to the selection of a previous image in the evaluation, in particular the time intervals of the images to be compared can be varied within certain limits.

Claims (9)

Verfahren zur Erkennung von Veränderungen des Bildinhaltes von Videobildern, bei dem das Videobild in eine Vielzahl von Feldern unterteilt wird, für jedes Feld der Helligkeitswert integral bestimmt wird, der Helligkeitswert mit dem Helligkeitswert des entsprechenden Feldes aus einem vorangegangenen Videobild verglichen wird, und in Abhängigkeit des Vergleichsergebnisses Veränderungen im Bildinhalt festgestellt werden, wobei eine Alarmgabe erfolgt, wenn eine alarmrelevante Änderung erkannt wird, dadurch gekennzeichnet, daß - zur Erkennung von alarmrelevanten Änderungen aus dem aktuellen und dem entsprechenden vorangegangenen Helligkeitswert jedes Feldes ein Quotient gebildet wird. Method for detecting changes in the image content of video images, in which the video image is divided into a plurality of fields, the brightness value is determined integrally for each field, the brightness value is compared with the brightness value of the corresponding field from a previous video image, and depending on the Comparative result changes in the image content are determined, an alarm being given if an alarm-relevant change is detected, characterized in that a quotient is formed from the current and the corresponding previous brightness value of each field in order to detect alarm-relevant changes. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß - eine nicht alarmrelevante großflächige Helligkeitsänderung erkannt wird, wenn sich der Quotient in den meisten Feldern ändert, aber den gleichen Wert erhält, und - bei einer großflächigen Helligkeitsänderung eine alarmrelevante Änderung erkannt wird, wenn in einem oder mehreren der Felder innerhalb der großflächigen Helligkeitsänderung ein zu den übrigen Feldern abweichender Wert des Quotienten festgestellt wird. A method according to claim 1, characterized in that - A large-scale change in brightness, which is not relevant to the alarm, is detected if the quotient changes in most fields but receives the same value, and - In the event of a large-scale change in brightness, an alarm-relevant change is detected if a value of the quotient deviating from the other fields is found in one or more of the fields within the large-scale change in brightness. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß für die Quotienten der Werte der Helligkeitsänderung von entsprechenden Feldern eines vorangegangenen und eines aktuellen Bildes ein Grenzbereich vorgegeben wird, bei dessen Überschreiten eine Änderung des Bildinhaltes erkannt wird.Method according to Claim 1 or 2, characterized in that for the quotients of the values for the change in brightness of corresponding fields in a previous and a current image, a limit range is specified, which, when exceeded, detects a change in the image content. Verfahren nach einem oder mehreren der Ansprüche 1 bis 3, dadurch gekennzeichnet, daß - bei einer großflächigen Änderung ein mittlerer Quotient berechnet wird, - ausgehend von diesem mittleren Wert ein Grenzbereich ermittelt wird, und - eine alarmrelevante Änderung erkannt wird, wenn in einem oder mehreren Feldern dieser Grenzbereich überschritten wird. Method according to one or more of claims 1 to 3, characterized in that - an average quotient is calculated for a large-scale change, - a limit range is determined on the basis of this average value, and - An alarm-relevant change is recognized if this limit range is exceeded in one or more fields. Verfahren nach einem oder mehreren der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß ein oder mehrere Felder zu einem Bereich zusammengefasst werden und bei Erkennen einer alarmrelevanten Änderung in einem Bereich ein Alarmsignal ausgegeben wird, das diesem Bereich zugeordnet ist.Method according to one or more of Claims 1 to 4, characterized in that one or more fields are combined to form an area and when an alarm-relevant change is detected in an area an alarm signal is output which is assigned to this area. Verfahren nach einem oder mehreren der Ansprüche 1 bis 5, dadurch gekennzeichnet, daß anstelle der Helligkeitsinformation Farbsignale ermittelt und zur Bildung des Quotienten herangezogen werden.Method according to one or more of claims 1 to 5, characterized in that color signals are determined instead of the brightness information and used to form the quotient. Verfahren nach einein oder mehreren der Ansprüche 1 bis 6, dadurch gekennzeichnet, daß zusätzlich zur Helligkeitsinformation Farbinformationen zur Bildung des Quotienten herangezogen werden.Method according to one or more of claims 1 to 6, characterized in that, in addition to the brightness information, color information is used to form the quotient. Vorrichtung zur Durchführung des Verfahrens nach einem oder mehreren der Ansprüche 1 bis 7, gekennzeichnet durch - eine Aufnahmekamera (11) - eine Funktionseinheit (12) zur Mittelwertbildung der Helligkeits- oder Farbinformation in jedem der eingeteilten Felder, - einen Speicher (13) zum Ablegen von Mittelwertdaten, - eine Funktionseinheit (15) zur Bildung des Quotienten von Mittelwerten entsprechender Felder aus einem aktuellen Bild und den im Speicher (13) abgelegten Mittelwerten eines vorangegangenen Bildes, - eine Auswerteeinheit (16) zur Auswertung der erhaltenen Quotienten, - eine Alarmgabeeinheit (17) zur akustischen und/oder visuellen Ausgabe eines Alarmsignales bei Erkennen einer alarmrelevanten Veränderung, und - eine Steuereinheit (14) zur Ablaufsteuerung. Device for carrying out the method according to one or more of claims 1 to 7, characterized by - a recording camera (11) a functional unit (12) for averaging the brightness or color information in each of the divided fields, - a memory (13) for storing mean value data, a functional unit (15) for forming the quotient of average values of corresponding fields from a current image and the average values of a previous image stored in the memory (13), - an evaluation unit (16) for evaluating the quotients obtained, - An alarm unit (17) for acoustic and / or visual output of an alarm signal when an alarm-relevant change is detected, and - A control unit (14) for sequence control. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, daß der Speicher (13) so ausgelegt ist, daß die Mittelwertdaten mehrerer Bilder gespeichert werden können.Apparatus according to claim 8, characterized in that the memory (13) is designed so that the mean data of a plurality of images can be stored.
EP92117686A 1991-11-21 1992-10-16 Method and device for detecting changes in a video image Expired - Lifetime EP0543148B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE4138254A DE4138254C1 (en) 1991-11-21 1991-11-21
DE4138254 1991-11-21

Publications (2)

Publication Number Publication Date
EP0543148A1 true EP0543148A1 (en) 1993-05-26
EP0543148B1 EP0543148B1 (en) 1996-03-27

Family

ID=6445258

Family Applications (1)

Application Number Title Priority Date Filing Date
EP92117686A Expired - Lifetime EP0543148B1 (en) 1991-11-21 1992-10-16 Method and device for detecting changes in a video image

Country Status (3)

Country Link
EP (1) EP0543148B1 (en)
AT (1) ATE136141T1 (en)
DE (2) DE4138254C1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19749136A1 (en) * 1997-11-06 1999-05-27 Geutebrueck Gmbh Method and device for detecting movements
EP0939386A1 (en) * 1998-02-28 1999-09-01 Siemens Building Technologies AG Space surveillance device
EP0939387A1 (en) * 1998-02-28 1999-09-01 Siemens Building Technologies AG Room supervision device
US6801246B2 (en) 2001-02-27 2004-10-05 Thomson Licensing, S.A. Method and apparatus for detecting change in video source material
EP1653743A1 (en) * 2003-01-20 2006-05-03 Sony Corporation Monitoring device and monitoring method using panorama image

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4407528C2 (en) * 1994-03-07 1998-04-09 Sq Services Ag Motion detectors and motion detection methods
DE19614675C2 (en) * 1995-04-27 1998-05-14 Alfred Frauhammer Hazard detection system with video surveillance
DE19603766A1 (en) * 1996-02-02 1997-08-07 Christian Gieselmann Intruder movement detection for surveillance and alarm system
DE19603935A1 (en) * 1996-02-03 1997-08-07 Bosch Gmbh Robert Movement detection within a surveillance area
US7196720B2 (en) 1998-03-06 2007-03-27 Intel Corporation Method and apparatus for powering on an electronic device with a video camera that detects motion
DE10206871A1 (en) * 2002-02-18 2003-09-04 Vidair Ag Method and device for testing a fire detection device
DE10261501A1 (en) * 2002-12-23 2004-07-15 Mobotix Ag Data reduction procedures

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2715083A1 (en) * 1977-04-04 1978-10-05 Bosch Gmbh Robert SYSTEM FOR DISCRIMINATION OF A VIDEO SIGNAL
US4249207A (en) * 1979-02-20 1981-02-03 Computing Devices Company Perimeter surveillance system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4679077A (en) * 1984-11-10 1987-07-07 Matsushita Electric Works, Ltd. Visual Image sensor system
DE3842356A1 (en) * 1988-12-16 1990-06-28 Martin Spies System for detecting a movement or a change in the surveillance area of a number of television cameras

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2715083A1 (en) * 1977-04-04 1978-10-05 Bosch Gmbh Robert SYSTEM FOR DISCRIMINATION OF A VIDEO SIGNAL
US4249207A (en) * 1979-02-20 1981-02-03 Computing Devices Company Perimeter surveillance system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PROCEEDINGS OF THE 1989 INTERNATIONAL CARNAHAN CONFERENCE ON SECURITY TECHNOLOGY 3. Oktober 1989, ZURICH Seiten 145 - 147 E. KOZLOW 'DAVID' *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19749136A1 (en) * 1997-11-06 1999-05-27 Geutebrueck Gmbh Method and device for detecting movements
DE19749136C2 (en) * 1997-11-06 2000-01-27 Geutebrueck Gmbh Method and device for detecting movements
EP0939386A1 (en) * 1998-02-28 1999-09-01 Siemens Building Technologies AG Space surveillance device
EP0939387A1 (en) * 1998-02-28 1999-09-01 Siemens Building Technologies AG Room supervision device
US6396534B1 (en) 1998-02-28 2002-05-28 Siemens Building Technologies Ag Arrangement for spatial monitoring
US6801246B2 (en) 2001-02-27 2004-10-05 Thomson Licensing, S.A. Method and apparatus for detecting change in video source material
EP1653743A1 (en) * 2003-01-20 2006-05-03 Sony Corporation Monitoring device and monitoring method using panorama image
EP1653743A4 (en) * 2003-01-20 2009-01-14 Sony Corp Monitoring device and monitoring method using panorama image

Also Published As

Publication number Publication date
ATE136141T1 (en) 1996-04-15
DE4138254C1 (en) 1993-06-24
EP0543148B1 (en) 1996-03-27
DE59205839D1 (en) 1996-05-02

Similar Documents

Publication Publication Date Title
DE3634628C2 (en)
DE69815977T2 (en) AGAINST GLOBAL CHANGES IN NON-SENSITIVE VIDEO MOTION DETECTOR
DE4430016C2 (en) Motion detectors and a method for motion detection
EP0939387B1 (en) Room supervision device
DE4107177C2 (en) Vehicle / vehicle distance measuring device
DE4138254C1 (en)
DE60006411T2 (en) counting
DE102013019138A1 (en) A method for detecting a hidden state of a camera, camera system and motor vehicle
DE102006057605A1 (en) Method and device for monitoring a three-dimensional space area
DE2617111B2 (en) Method for detecting movement in the surveillance area of a television camera
EP1531342B1 (en) Method of detecting pedestrians
EP0248298A1 (en) Danger alarm installation
DE4343095C2 (en) Method and circuit for eliminating interference signals from video signals
DE3214254C2 (en)
DE3842356A1 (en) System for detecting a movement or a change in the surveillance area of a number of television cameras
EP1026632B1 (en) image-evaluation system and method
DE4314483A1 (en) Surveillance system
EP1485889B1 (en) Method for following at least one object in a scene
DE60319346T2 (en) SENSOR WITH DETECTION OF COVERS
WO1997004428A1 (en) Interactive surveillance system
DE102019113647A1 (en) Camera system for capturing objects and / or object properties
EP0514390B1 (en) Process for determining the instantaneous position and shape of moving objects and for displaying them as a binary image
EP0830014A2 (en) Detection of oblique scratches in video signals
DE19614675C2 (en) Hazard detection system with video surveillance
EP0749619A1 (en) System and process for evaluating images

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT CH DE ES FR GB IT LI

17P Request for examination filed

Effective date: 19930730

17Q First examination report despatched

Effective date: 19940727

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: GRUNDIG E.M.V. ELEKTRO-MECHANISCHE VERSUCHSANSTALT

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AT CH DE ES FR GB IT LI

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: THE PATENT HAS BEEN ANNULLED BY A DECISION OF A NATIONAL AUTHORITY

Effective date: 19960327

REF Corresponds to:

Ref document number: 136141

Country of ref document: AT

Date of ref document: 19960415

Kind code of ref document: T

REF Corresponds to:

Ref document number: 59205839

Country of ref document: DE

Date of ref document: 19960502

ET Fr: translation filed
GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)

Effective date: 19960430

ITF It: translation for a ep patent filed

Owner name: STUDIO JAUMANN

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Effective date: 19961016

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed
REG Reference to a national code

Ref country code: GB

Ref legal event code: 732E

REG Reference to a national code

Ref country code: FR

Ref legal event code: TP

REG Reference to a national code

Ref country code: GB

Ref legal event code: IF02

REG Reference to a national code

Ref country code: FR

Ref legal event code: TP

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

Ref country code: CH

Ref legal event code: PUE

Owner name: PLETTAC AG; KOEBBINGHAUSER HAMMER; 58840 PLETTENBERG (DE)

Free format text: FORMER OWNER: GRUNDIG E.M.V. ELEKTRO- MECHANISCHE VERSUCHSANSTALT MAX GRUNDIG GMBH & CO. KG:

Ref country code: CH

Ref legal event code: NV

Representative=s name: BOVARD AG PATENTANWAELTE

Ref country code: CH

Ref legal event code: PUE

Owner name: FUNKWERK PLETTAC ELECTRONIC GMBH; WUERZBURGER STRASSE 150; 90766 FUERTH (DE)

Free format text: PLETTAC AG#KOEBBINGHAUSER HAMMER#58840 PLETTENBERG (DE) -TRANSFER %%- FUNKWERK PLETTAC ELECTRONIC GMBH#WUERZBURGER STRASSE 150#90766 FUERTH (DE)

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20091007

Year of fee payment: 18

Ref country code: CH

Payment date: 20091027

Year of fee payment: 18

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20091117

Year of fee payment: 18

Ref country code: IT

Payment date: 20091023

Year of fee payment: 18

Ref country code: GB

Payment date: 20091026

Year of fee payment: 18

REG Reference to a national code

Ref country code: CH

Ref legal event code: PFA

Owner name: FUNKWERK PLETTAC ELECTRONIC GMBH

Free format text: FUNKWERK PLETTAC ELECTRONIC GMBH#WUERZBURGER STRASSE 150#90766 FUERTH (DE) -TRANSFER TO- FUNKWERK PLETTAC ELECTRONIC GMBH#WUERZBURGER STRASSE 150#90766 FUERTH (DE)

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20101016

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101102

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20110630

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 59205839

Country of ref document: DE

Effective date: 20110502

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101016

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101016

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20110502