WO2004012168A2 - Procede de detection d’incident sur route - Google Patents

Procede de detection d’incident sur route Download PDF

Info

Publication number
WO2004012168A2
WO2004012168A2 PCT/FR2003/002188 FR0302188W WO2004012168A2 WO 2004012168 A2 WO2004012168 A2 WO 2004012168A2 FR 0302188 W FR0302188 W FR 0302188W WO 2004012168 A2 WO2004012168 A2 WO 2004012168A2
Authority
WO
WIPO (PCT)
Prior art keywords
landscape
image
points
target
real image
Prior art date
Application number
PCT/FR2003/002188
Other languages
English (en)
Other versions
WO2004012168A3 (fr
Inventor
Salah Bouzar
Original Assignee
Citilog
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Citilog filed Critical Citilog
Priority to AU2003273432A priority Critical patent/AU2003273432A1/en
Priority to EP03755590.1A priority patent/EP1584079B1/fr
Priority to US10/521,606 priority patent/US8055015B2/en
Publication of WO2004012168A2 publication Critical patent/WO2004012168A2/fr
Publication of WO2004012168A3 publication Critical patent/WO2004012168A3/fr

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • G06Q50/40
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules

Definitions

  • the present invention relates to methods for detecting changes in the state of occupation of a portion of track capable of being traversed by objects along its axis located in a given landscape, for example for evaluating variations in traffic density on this portion of track, methods which find a particularly advantageous application in the field of the detection of incidents of all kinds which may occur on this portion of track.
  • sensors capable of giving an image of vehicle traffic on a portion 13 ⁇ ⁇ vôi ⁇ rD ⁇ numerous " sensors have been developed.
  • a sensor comprising photosensitive receivers has been developed. associated with light rays directed towards the tracks traversed by the vehicles and returned by reflective surfaces arranged for this purpose on the roadways, these photosensitive receivers delivering to their outputs signals each time a vehicle cuts the light beams.
  • the signals delivered are only representative of the traffic at a determined point and the sensors used are not flexible to use because they require fixing elements on the roadway, at well-defined locations and ensuring reflection. permanent of these reflective surfaces by adding artificial lighting when the lighting of the scene is poor. These elements cannot therefore be moved without problems and, when put in place, they require frequent interventions, if only to clean their reflective surfaces.
  • This main image is then broken down into a plurality of points and the relationship is determined between the dimension of a unit length taken substantially at the level of the track portion and the dimension of its image formed in the main image, as a function of the number of points covered by the image and of the location of the unit length on the track portion.
  • a secondary image is also determined in the main image, this secondary image corresponding to a longitudinal reference linked to the vehicle located on the track portion, the different successive positions of the secondary image being defined by correlation of the number of points. covered by this secondary image, knowing that this secondary image corresponds, according to said relation, to a constant length at the level of the track portion.
  • the device described in this prior document gives very good results and makes it possible to determine a very large number of parameters defining the density of traffic on a portion of track. However, it is very expensive or too complex for certain applications, which limits its use.
  • Such a device is for example described in FR-A-2 679 682 which gives an example of the implementation of a method making it possible to detect an incident on a portion of track located in a landscape when this portion of track is able to be traversed by objects.
  • Such a device has advantages over prior devices. In addition to the fact that it is made up of elements which are commonly found on the market, it makes it possible to store the images of the portion of track put under surveillance, these images being able to be subsequently used for, for example, knowing the cause an incident or the like occurred on this section of track.
  • this method is therefore no longer possible when, for example, the direction of the optical axis of the camera changes in elevation and / or in azimuth, and / or when the field of view of the camera lens varies, for example by "zooming" on a particular part of the track portion and / or of the landscape which comprises this track portion.
  • the object of the present invention is therefore to implement a method which makes it possible to automatically detect an incident occurring on a portion of track, for example by the "DAI" technique described in FR-A-2 679 682, even when the field of view of the camera lens has been modified for example by acting on the "zoom” and / or when the direction of the optical axis of the camera has been changed in elevation and / or in azimuth, without impose, for example, the manual intervention of technicians after each of these modifications, while allowing the devices to be used for the implementation of the processes of the prior art without having to add additional material means.
  • the subject of the present invention is a method for detecting an incident on a portion of track located in a landscape when said portion of track is suitable for being traversed by objects and when the method implements a camera.
  • - video comprising- a target constituting an optoelectronic converter of a real optical image of the landscape, said target being controlled by a programmable processing member, the incident detection process not being able to be carried out by carrying out an activation of said programmable processing only when the real image of the landscape focused on the target is fixed, characterized in that it consists:
  • the single figure represents the block diagram of an embodiment of the means for implementing the method according to the invention and also making it possible to explain this method.
  • the present invention relates to a method for detecting an incident on a portion of track 1 located in a landscape 2 when this portion of track is capable of being traversed by objects of any kind, in particular in the case where the portion of track is suitable to be traveled by motor vehicles.
  • a video camera 3 comprising a target 4 constituting an optoelectronic converter of a real optical image 5 of the landscape 2 and when, with this camera, means 14 are associated which allow to modify at will the field of the objective 15 of the camera when it consists of a "zoom" and / or to modify the orientation of the optical axis 16 of the camera so that the direction of this optical axis can be controlled in elevation and in azimuth.
  • means 14 are well known in themselves and will therefore not be described more fully here for the sole purpose of simplifying the present description. It is specified that, by landscape means all the elements of the scene, including the portion of track, which are in the field of the camera.
  • the target is analyzed by a programmable processing unit
  • the detection of incidents on the track portion 1 in the landscape 2 cannot be carried out by activating the programmable processing member 6 only when the real image 5 of the landscape focused on the target 4 is fixed.
  • the method according to the invention therefore consists in detecting the start of a displacement of the real image 5 of the landscape 2 relative to the target 4, in deactivating the programmable processing member 6 from the start of the displacement of the image real 5 of the landscape compared to the target, and then to detect the end of the displacement of the real image of the landscape with respect to the target, and finally reactivating the programmable processing unit at the end of the displacement of the real image of the landscape with respect to the target A, to carry out the detection process incident on the track portion 1.
  • the detection of the start and end of the movement of the real image of the landscape relative to the target consists in determining at least a first point -image 10, 11, 12, ...
  • this real image 5 of landscape 2 which corresponds to a fixed point 10 ', 11', 12 ', ... of this landscape, to develop a first order signal when this first image point undergoes a change of position on the target 4, then to control the programmable processing member 6 as a function of this first command signal, that is to say, first of all deactivate the programmable processing unit from the start of the movement of the real image, then reactivate this same me programmable processing unit at the end of the movement of the real image to perform, according to the technique known per se, the incident detection process.
  • the detection of the start and the end of the displacement of the real image 5 of the landscape 2 relative to the target consists in determining at least two second and third image points 10, 11, 12, ... of the real image 5 of the landscape 2 which correspond respectively to two fixed points 10 ', 11', 12 ', ...
  • the detection of the beginning and the end of the displacement of the real image of the landscape relative to the target consists first of all in determining at least two fourth and fifth image points 10, 11, 12, ... of the real image 5 of the landscape 2 which correspond respectively to two fixed points 10 ', 11', 12 ', ...
  • the order signals defined above pass, by way of example, from a first state to a second state when the start of movement of the real image 5 is detected, and from the second state to the first state when the end of the displacement of this same real image is detected.
  • the programmable processing unit 6 is deactivated during the period during which the command signal is in its second state.
  • the fixed points 10 ′, 11 ′, 12 ′, etc. in the landscape 2 can be, for example, in the case of the detection of incidents on an automobile traffic lane or the like, dark (or particularly bright) points signboards, lampposts or the like, portions of advertising signs, or even particularly dark (or particularly bright) spots of specific vegetation.
  • the detection of the beginning and the end, either of the displacement of an image point of the real image 5 of the landscape 2 relative to the target, or of the variation of distance between two image points, can easily be done by example by means of the processing member 6 controlled by a suitable computer program adapted r emit out the method according to the invention, the preparation of such a program is the domain of the skilled person when he knows the method explained above.
  • the target 4 is composed of a plurality of photosensitive points, these photosensitive points being capable of delivering signals as a function of the quantity of radiation received on their photosensitive surface.
  • the receiving surfaces of these photosensitive points advantageously have dimensions of substantially the same value.
  • commercial video cameras generally have such targets.
  • the detection of an incident on the track portion 1 is only capable of being carried out by activating the programmable processing member 6 when the real image 5 of the landscape 2 focused on the target 4 is fixed.
  • the programmable processing unit 6 When the programmable processing unit 6 is activated, it is able to
  • This incident detection process consists schematically in selecting a group of photosensitive points from the plurality of photosensitive points of the target 4, this selected group of points corresponding to points of the portion of track 1 located on a plurality of imaginary lines. main lying on the plane of the track portion 1 and being substantially parallel to the axis of the substantially rectilinear trajectory along which the objects on the track portion 1 should normally move, and to analyze all the signals delivered by the photosensitive points of the selected group.
  • This incident detection process can also consist in breaking down the group of photosensitive points selected into a plurality of
  • this coefficient being a function of the probability of preferential passage of the objects on the point of the portion of track which has for image the photosensitive point associated with this coefficient.
  • the analysis of the signals delivered by the photosensitive points mentioned above can consist in carrying out an average of the values of the signals
  • the processing member 6 again controls the incident detection process by the method of the type "DAI" as defined above.
  • the processing unit 6 again controls the incident detection process by the "DAI" method as defined above.
  • the detection of the beginning and the end of the displacement of the real image of the landscape relative to the target advantageously consists in determining a plurality of image points of the real image of the landscape which corresponds to a plurality of fixed points at the start of the displacement of the real image, in developing a fourth order signal when, in this plurality of points -images, a determined number of them have become fixed again at the end of the displacement of the real image, and to control the programmable processing member as a function of this fourth order signal, that is to say , first deactivate the organ no programmable processing from the start of the displacement of the real image, then reactivate this same programmable processing member at the end of the displacement of the real image to perform, according to the technique known in itself, the process of detecting 'incident.

Abstract

La présente invention concerne un procédé pour détecter un incident sur une portion de voie (1) située dans un paysage (2) lorsque la portion de voie est apte à être parcourue par des objets et que le procédé met en œuvre une caméra vidéo (3) comportant une cible (4) constituant un convertisseur optoélectronique d’une image optique réelle du paysage (2), la cible étant pilotée par un organe de traitement programmable (6) et le processus de détection des incidents n’étant apte à être effectué en réalisant une activation de l’organe de traitement programmable (6) que lorsque l’image réelle du paysage réelle du paysage focalisée sur la cible (4) est fixe. Le procédé selon l’invention se caractérise par le fait qu’il consiste à détecter le début d’un déplacement de l’image réelle du paysage par rapport à la cible, à désactiver l’organe de traitement programmable dès le début du déplacement de l’image réelle du paysage par rapport à la cible, et à réactiver l’organe de traitement programmable à la fin du déplacement de l’image réelle du paysage par rapport à la cible pour effectuer le processus de détection d’incident.

Description

PROCEDE POUR DETECTER UN INCIDENT OU ANALOGUE SUR UNE PORTION DE VOIE
La présente invention concerne les procédés pour détecter les changements de l'état d'occupation d'une portion de voie apte à être parcourue par des objets suivant son axe située dans un paysage donné, par exemple pour évaluer les variations de la densité du trafic sur cette portion de voie, procédés qui trouvent une application particulièrement avantageuse dans le domaine de la détection d'incidents de toute nature qui peuvent se produirent sur cette portion dé voie.
Le trafic, notamment de véhicules automobiles, ne cesse d'augmenter depuis plusieurs années et, dans certaines circonstances, par exemple suite à des incidents sur les voies empruntées par ces véhicules, il se produit des engorgements nuisant incontestablement à la circulation. Il a donc été pensé qu'il pourrait être remédié à ces inconvénients en détectant tout incident survenant sur une portion de voie, le plus rapidement possible après qu'il se soit produit, puis en contrôlant et modulant la circulation des véhicules sur cette portion de voie, que cette portion de voie soit fortement parcourue par des véhicules (voie dite circulée) ou faiblement fréquentée par les véhicules (une bande d'arrêt d'urgence, zone à zébra, refuge, etc.).
Pour pouvoir détecter de tels incidents, il a été nécessaire de réaliser des capteurs pouvant donner une image de la circulation des véhicules sur une portion 13ë~ vôiërDë nombreux "capteurs ont été mis au point Il a par exemple été élaboré un capteur comportant des récepteurs photosensibles associés à des rayons lumineux dirigés vers les voies parcourues par les véhicules et renvoyés par des surfaces réfléchissantes disposées à cet effet sur les chaussées, ces récepteurs photosensibles délivrant à leurs sorties des signaux chaque fois qu'un véhicule coupe les faisceaux lumineux.
Cette technique donne de bons résultats. Mais les signaux délivrés ne sont représentatifs que du trafic en un point déterminé et les capteurs utilisés ne sont pas d'une utilisation souple car ils nécessitent de fixer des éléments sur la chaussée, à des emplacements bien définis et de s'assurer de la réflexion permanente de ces surfaces réfléchissantes par l'ajout d'un éclairage artificiel lorsque l'éclairement de la scène est faible. Ces éléments ne peuvent donc être déplacés sans problèmes et, lorsqu'ils sont mis en place, ils imposent des interventions fréquentes, ne serait-ce que pour le nettoyage de leurs surfaces réfléchissantes.
D'autres capteurs ont été réalisés pour augmenter la surface de surveillance. Tel est le cas d'un capteur constitué par une boucle magnétique noyée dans la chaussée. Ce capteur permet de pallier une partie des inconvénients mentionnés ci-avant mais son utilité reste encore trop ponctuelle, par le fait-même qu'il reste lié à un endroit déterminé de la chaussée et nécessite de gros travaux d'installation par sciage de la chaussée. II a également été mis au point un dispositif pour la mise en oeuvre du procédé décrit dans le EP-A-0 277 050. Selon ce procédé, il est tout d'abord formé une image réelle principale de la portion de voie, dans un plan formant un angle non nul avec celui de cette portion de voie. Cette image principale est ensuite décomposée en une pluralité de points et on détermine la relation entre la dimension d'une longueur unitaire prise sensiblement au niveau de la portion de voie et la dimension de son image formée dans l'image principale, en fonction du nombre de points recouverts par l'image et de l'emplacement de la longueur unitaire sur la portion de voie. Il est en outre déterminé une image secondaire dans l'image principale, cette image secondaire correspondant à un repère longitudinal lié au véhicule se trouvant sur la portion de voie, les différentes positions successives de l'image secondaire étant définies par corrélation du nombre de points recouverts par cette image secondaire, sachant que cette image secondaire correspond, suivant ladite relation, à une longueur constante au niveau de la portion de voie. Le dispositif décrit dans ce document antérieur donne de très bons résultats et permet de déterminer un très grand nombre de paramètres définissant la densité du trafic sur une portion de voie. Il est cependant très onéreux ou trop complexe pour certaines applications, ce qui limite son utilisation.
Il a été mis au point un autre dispositif relativement plus simple, comme celui décrit dans le US-A-4 258 351. Celui-ci comporte une série de cellules photosensibles réparties dans le plan focal d'une lentille convergente. Chaque cellule est constituée d'une barrette, et chaque barrette est déterminée pour que sa longueur soit égale à la largeur de l'image de la voie formée par la lentille. Cette longueur suit donc la loi de la perspective de la voie. Cette technique présente l'avantage d'une mise en œuvre facile, mais présente également des inconvénients : il faut une réalisation pour chaque voie et on n'obtient qu'un seul signal par ligne transversale à la voie, ce qui rend l'interprétation de ces signaux très difficile. D'autres dispositifs qui donnent de bons résultats ont été mis au point, qui sont constitués d'une caméra vidéo comportant une cible constituant un convertisseur optoélectronique d'une image optique, cette cible étant pilotée par un organe de traitement programmable.
Un tel dispositif est par exemple décrit dans le FR-A-2 679 682 qui donne un exemple de mise en œuvre d'un procédé permettant de détecter un incident sur une portion de voie située dans un paysage lorsque cette portion de voie est apte à être parcourue par des objets.
Un tel dispositif présente des avantages par rapport aux dispositifs antérieurs. Outre le fait qu'il est constitué avec des éléments qui se trouvent couramment dans le commerce, il permet de mettre en mémoire les images de la portion de voie mise sous surveillance, ces images pouvant être ultérieurement utilisées pour, par exemple, connaître la cause d'un incident ou analogue survenu sur cette portion de voie.
En outre, pour mieux connaître la nature et les conséquences immédiates de l'incident, ce qui permet de mieux étudier sa cause, il est possible de modifier à volonté le champ de l'objectif de la caméra lorsqu'il est constitué d'un "zoom" et/ou de modifier l'orientation de l'axe optique de la caméra en montant celle-ci en coopération "avec" un organe d'orientation de façon que la direction" de l'axe optique puisse être commandée en site et en azimut. Ces possibilités offertes par les caméras vidéo actuelles sont très intéressantes pour les exploitants des voies de circulation, notamment automobile, mais compliquent considérablement la mise en œuvre du procédé comme celui qui est donné dans le FR-A-2 679 682 pour détecter un incident par la technique connue des techniciens sous le terme de "DAI". En effet, cette technique "DAI" de détection automatique d'incidents sur une portion de voie ne peut être mise en œuvre que si l'image de la portion de voie formée sur la cible photosensible de la caméra est stable pendant plusieurs secondes, voire même quelques minutes, le temps nécessaire pour que l'organe de traitement puisse exécuter le programme de mise en œuvre du procédé. Le procédé selon cette technique nécessite une phase de calibrage manuelle sur l'image stable. En général, la caméra est fixe et cette phase est accomplie au moment de la mise en service du dispositif. Par exemple, les opérations de maintenance sur la caméra nécessitent de vérifier, à chaque fois, le bon calibrage du capteur.
La mise en œuvre de ce procédé n'est donc plus possible quand, par exemple, la direction de l'axe optique de la caméra change en site et/ou en azimut, et/ou quand le champ de l'objectif de la caméra varie, par exemple en "zoomant" sur une partie particulière de la portion de voie et/ou du paysage qui comporte cette portion de voie.
La présente invention a donc pour but de mettre en œuvre un procédé qui permet de détecter de façon automatique un incident survenant sur une portion de voie, par exemple par la technique "DAI" décrite dans le FR-A-2 679 682, même quand le champ de l'objectif de la caméra a été modifié par exemple en agissant sur le "zoom" et/ou quand la direction de l'axe optique de la caméra a été changée en site et/ou en azimut, et ce, sans imposer, par exemple, l'intervention manuelle de techniciens après chacune de ces modifications, tout en permettant d'utiliser les dispositifs pour la mise en œuvre des procédés de l'art antérieur sans devoir ajouter des moyens matériels supplémentaires. La présente invention a pour objet un procédé pour détecter un incident sur une portion de voie située dans un paysage lorsque ladite portion de voie est apte à être parcourue par des objets et que le procédé met en œuvre une caméra
- vidéo comportant- une cible constituant un convertisseur optoélectronique d'une image optique réelle du paysage, ladite cible étant pilotée par un organe de traitement programmable, le processus de détection des incidents n'étant apte à être effectué en réalisant une activation dudit organe de traitement programmable que lorsque l'image réelle du paysage focalisée sur la cible est fixe, caractérisé par le fait qu'il consiste :
- à détecter le début d'un déplacement de l'image réelle du paysage par rapport à la cible,
- à désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle du paysage par rapport à la cible,
- à détecter la fin du déplacement de l'image réelle du paysage par rapport à la cible, et - à réactiver l'organe de traitement programmable à la fin du déplacement de l'image réelle du paysage par rapport à la cible pour effectuer le processus de détection d'incident.
D'autres caractéristiques et avantages de l'invention apparaîtront au cours de la description suivante donnée en regard des dessins annexés à titre illustratif mais nullement limitatif, dans lesquels :
La figure unique représente le schéma de principe d'un mode de réalisation des moyens pour mettre en œuvre le procédé selon l'invention et permettant en outre d'expliciter ce procédé. La présente invention concerne un procédé pour détecter un incident sur une portion de voie 1 située dans un paysage 2 lorsque cette portion de voie est apte à être parcourue par des objets, de toute nature, notamment dans le cas ou la portion de voie est apte à être parcourue par des véhicules automobiles.
Ce procédé s'applique lorsque, pour sa mise en œuvre, est utilisée une caméra vidéo 3 comportant une cible 4 constituant un convertisseur optoélectronique d'une image optique réelle 5 du paysage 2 et que, à cette caméra, sont associés des moyens 14 qui permettent de modifier à volonté le champ de l'objectif 15 de la caméra lorsqu'il est constitué d'un "zoom" et/ou de modifier l'orientation de l'axe optique 16 de la caméra de façon que la direction de cet axe optique puisse être commandée en site et en azimut. Ces derniers moyens 14 sont bien connus en eux-mêmes et ne seront donc pas plus amplement décrits ici dans l'unique souci de simplifier la présente description. II est précisé que, par paysager on entend tous les éléments de la scène, y compris la portion de voie, qui sont dans le champ de la caméra. De plus, la cible est analysée, par un organe de traitement programmable
6, comme un microprocesseur ou analogue, auquel est éventuellement associée une mémoire permanente 17 comme un magnétoscope ou analogue, la détection des incidents sur la portion de voie 1 dans le paysage 2 ne pouvant être effectuée en activant l'organe de traitement programmable 6 que lorsque l'image réelle 5 du paysage focalisée sur la cible 4 est fixe.
Le procédé selon l'invention consiste donc à détecter le début d'un déplacement de l'image réelle 5 du paysage 2 par rapport à la cible 4, à désactiver l'organe de traitement programmable 6 dès le début du déplacement de l'image réelle 5 du paysage par rapport à la cible, puis à détecter la fin du déplacement de l'image réelle du paysage par rapport à la cible, et enfin à réactiver l'organe de traitement programmable à la fin du déplacement de l'image réelle 5 du paysage par rapport à la cible A, pour effectuer le processus de détection d'incident sur la portion de voie 1. Selon une première mise en œuvre avantageuse du procédé, la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste à déterminer au moins un premier point-image 10, 11, 12, ... de cette image réelle 5 du paysage 2 qui correspond à un point fixe 10', 11', 12', ... de ce paysage, à élaborer un premier signal d'ordre quand ce premier point- image subit un changement de position sur la cible 4, puis à commander l'organe de traitement programmable 6 en fonction de ce premier signal d'ordre, c'est-à- dire, tout d'abord désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle, puis réactiver ce même organe de traitement programmable à la fin du déplacement de l'image réelle pour effectuer, selon la technique connue en elle-même, le processus de détection d'incident.
Selon une deuxième mise en œuvre avantageuse du procédé, la détection du début et de la fin du déplacement de l'image réelle 5 du paysage 2 par rapport à la cible consiste à déterminer au moins deux deuxième et troisième points- images 10, 11, 12, ... de l'image réelle 5 du paysage 2 qui correspondent respectivement à deux points fixes 10', 11', 12', ... de ce paysage, à élaborer un deuxième signal d'ordre quand la distance séparant ces deuxième et troisième points-images subit une variation, et ensuite à commander l'organe de traitement programmable 6 en fonction du deuxième signal d'ordre; c'est-à-dire, tout d'abord - désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle, puis réactiver ce même organe de traitement programmable à la fin du déplacement de l'image réelle pour effectuer, selon la technique connue en elle-même, le processus de détection d'incident.
Dans une troisième mise en œuvre avantageuse du procédé qui sera certainement préférée aux deux précédentes, la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste tout d'abord à déterminer au moins deux quatrième et cinquième points-images 10, 11, 12, ... de l'image réelle 5 du paysage 2 qui correspondent respectivement à deux points fixes 10', 11', 12', ... du paysage, à élaborer un troisième signal d'ordre quand la distance séparant les quatrième et cinquième points-images subit une variation et quand au moins l'un des deux quatrième et cinquième points-images subit un changement de position sur la cible 4, et à commander l'organe de traitement programmable 6 en fonction du troisième signal d'ordre, c'est-à-dire, tout d'abord désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle, puis réactiver ce même organe de traitement programmable à la fin du déplacement de l'image réelle pour effectuer, selon la technique connue en elle-même, le processus de détection d'incident.
Il est précisé que les signaux d'ordre définis ci-avant passent, à titre d'exemple, d'un premier état à un second état quand est détecté le début du déplacement de l'image réelle 5, et du second état au premier état quand est détectée la fin du déplacement de cette même image réelle.
En fait, l'organe de traitement programmable 6 est désactivé pendant la période pendant laquelle le signal d'ordre est dans son second état.
Les points fixes 10', 11', 12', ... dans le paysage 2 peuvent être par exemple, dans le cas de la détection d'incidents sur une voie de circulation automobile ou analogue, des points sombres (ou particulièrement lumineux) de panneaux signalétiques, de lampadaires ou analogues, de portions de panneaux publicitaires, ou même des points particulièrement sombres (ou particulièrement lumineux) d'une végétation déterminée. La détection du début et de la fin, soit du déplacement d'un point-image de l'image réelle 5 du paysage 2 par rapport à la cible, soit de la variation de distance entre deux points-images, peut aisément se faire par exemple au moyen de l'organe de traitement 6 piloté par un programme informatique adapté apte remettre en œuvre le procédé selon l'invention, l'élaboration d'un tel programme étant du domaine de l'homme du métier quand il connaît le procédé explicité ci- dessus.
Pour une mise en œuvre plus aisée et donc préférentielle du procédé, la cible 4 est composée d'une pluralité de points photosensibles, ces points photosensibles étant aptes à délivrer des signaux en fonction de la quantité de rayonnement reçue sur leur surface photosensible. De plus, les surfaces de réception de ces points photosensibles ont avantageusement des dimensions sensiblement de même valeur. En fait, les caméras vidéo du commerce comportent généralement de telles cibles. Comme mentionné ci-avant, la détection d'un incident sur la portion de voie 1 n'est apte à être effectuée en activant de l'organe de traitement programmable 6 que lorsque l'image réelle 5 du paysage 2 focalisée sur la cible 4 est fixe.
Lorsque l'organe de traitement programmable 6 est activé, il est apte à
5 effectuer une détection des incidents sur la portion de voie suivant différents processus. Un exemple avantageux de l'un de ces processus de détection d'incidents, connu des techniciens sous la terminologie "DAI", est par exemple décrit et explicité dans le FR-A-2 679682.
Ce processus de détection d'incidents consiste schématiquement à 10 sélectionner un groupe de points photosensibles dans la pluralité de points photosensibles de la cible 4, ce groupe de points sélectionné correspondant à des points de la portion de voie 1 localisés sur une pluralité de lignes imaginaires principales se situant au niveau du plan de la portion de voie 1 et étant sensiblement parallèles à l'axe de la trajectoire sensiblement rectiligne suivant 15 laquelle doivent normalement se déplacer les objets sur la portion de voie 1, et à analyser l'ensemble des signaux délivrés par les points photosensibles du groupe sélectionné.
Ce processus de détection d'un incident peut aussi consister à décomposer le groupe de points photosensibles sélectionné en une pluralité de
20 sous-groupes de points photosensibles correspondant à des points de la portion de voie situés à l'intersection des lignes imaginaires principales et, respectivement, de lignes imaginaires secondaires sensiblement perpendiculaires
— - aux lignes imaginaires principales, et à associer à chaque point photosensible d'un sous-groupe un coefficient multiplicateur de la valeur du signal émis par ce
25 point, ce coefficient étant fonction de la probabilité de passage préférentiel des objets sur le point de la portion de voie qui a pour image le point photosensible associé à ce coefficient.
L'analyse des signaux délivrés par les points photosensibles mentionnée ci-dessus peut consister à effectuer une moyenne des valeurs des signaux
30 délivrés, à des instants donnés, par les points de chaque sous-groupe, puis à comparer, pour chaque sous-groupe, les moyennes ainsi obtenues, et à déduire, de cette comparaison, la présence éventuelle d'un incident sur la portion de voie.
Le procédé selon l'invention tel que décrit et défini ci-dessus s'explicite de la façon suivante. Il est tout d'abord précisé qu'il est facile de définir l'adresse d'un point- image sur la cible d'une caméra vidéo, et ce, d'autant plus que cette cible est formée d'une pluralité de points photosensibles comme des pixels ou analogues. Par une analyse de cette cible à l'aide d'un logiciel adapté qui permet de mettre en œuvre le procédé selon l'invention, il est possible de contrôler automatiquement la position d'un point-image sur la cible. Si ce point-image est l'image d'un point fixe du paysage 2, quand la caméra effectue un déplacement en site et/ou en azimut, ce point-image va changer de position. En suivant les changements de position de ce point-image, il est donc possible de déterminer le début et la fin du déplacement de l'image réelle du paysage 2 par rapport à la cible, et de désactiver l'organe de traitement tant que la position de ce point- image n'est pas redevenue fixe.
Quand l'image redevient stable, c'est-à-dire quand le point-image est analysé comme fixe par rapport à la cible, l'organe de traitement 6 commande à nouveau le processus de détection d'incidents par le procédé du type "DAI" comme défini ci-avant.
De même, quand on agit sur le zoom en avant ou en arrière sur le paysage 2, l'image sur la cible va respectivement grandir ou diminuer, de même donc que la distance séparant deux points-images. De la même façon que décrit ci-dessus, il est possible de déterminer le début et la fin de la commande du zoom et, pendant ce temps, de désactiver tout au moins en partie l'organe de traitement, la partie étant demeurée active recherehant-par exemple la stabilité. --• -- - -•
Quand l'image redevient stable pendant une certaine constante de temps déterminée par les techniciens, c'est-à-dire quand les deux points-images sont analysés comme restant à distance constante, leur adresse respective étant redevenue fixe, l'organe de traitement 6 commande à nouveau le processus de détection d'incidents par le procédé "DAI" comme défini ci-avant.
Le procédé décrit ci-dessus a été décrit avec un point-image pour déterminer un déplacement de la caméra en site et/ou en azimut, et deux points- images pour détecter un zoom avant ou un zoom arrière. Mais, dans l'application à la détection d'un incident sur une portion de voie de circulation automobile ou analogue, il sera avantageusement utilisé une plus grande quantité de points- images pour assurer de façon la plus certaine possible la détection automatique d'un déplacement de la caméra aussi bien en site qu'en azimut et/ou une action sur le zoom. En effet, il n'est pas impossible, par exemple, que la position d'un point-image ait été considérée comme fixe avant un déplacement et que, à la fin de ce déplacement, sa position ne puisse être considérée comme fixe, ce point- image appartenant à l'image d'un véhicule en mouvement sur la portion de voie 1. Aussi pour lever cette indétermination, la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible, consiste avantageusement à déterminer une pluralité de points-images de l'image réelle du paysage qui correspond à une pluralité de points fixes au début du déplacement de l'image réelle, à élaborer un quatrième signal d'ordre quand, dans cette pluralité de points-images, un nombre déterminé d'entre eux sont redevenus fixes à la fin du déplacement de l'image réelle, et à commander l'organe de traitement programmable en fonction de ce quatrième signal d'ordre, c'est-à-dire, tout d'abord désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle, puis réactiver ce même organe de traitement programmable à la fin du déplacement de l'image réelle pour effectuer, selon la technique connue en elle-même, le processus de détection d'incident.
Les hommes du métier sauront déterminer la quantité optimale de points- images à utiliser et, dans cette quantité optimale de points-images, le nombre de points-images stables à prendre en compte.
A la description faite ci-avant, il apparaît nettement que le procédé peut être mis en œuvre sans l'intervention manuelle de techniciens après chaque changement d'orientation de axe optique de la caméra en site et/ou en-azimut, et/ou chaque variation d'angle de champ de son objectif, tout en utilisant les mêmes dispositifs que pour la mise en œuvre des procédés selon l'art antérieur, sans devoir ajouter des moyens matériels supplémentaires.
Il suffit, pour mettre en œuvre le procédé selon la présente invention, de charger de façon classique dans l'organe de traitement programmable un logiciel adapté à ce procédé, en sachant que l'élaboration de ce logiciel est du domaine de l'homme du métier comme mentionné auparavant.

Claims

R E V E N D I C A T I O N S
1. Procédé pour détecter un incident sur une portion de voie (1) située dans un paysage
(2) lorsque ladite portion de voie est apte à être parcourue par des objets et que le procédé met en œuvre une caméra vidéo (3) comportant une cible (4) constituant un convertisseur optoélectronique d'une image optique réelle du paysage, ladite cible étant pilotée par un organe de traitement programmable (6), le processus de détection des incidents n'étant apte à être effectué en réalisant une activation dudit organe de traitement programmable que lorsque l'image réelle (5) du paysage focalisée sur la cible (4) est fixe, caractérisé par le fait qu'il consiste : - à détecter le début d'un déplacement de l'image réelle du paysage par rapport à la cible,
- à désactiver l'organe de traitement programmable dès le début du déplacement de l'image réelle du paysage par rapport à la cible,
- à détecter la fin du déplacement de l'image réelle du paysage par rapport à la cible, et
- à réactiver l'organe de traitement programmable à la fin du déplacement de l'image réelle du paysage par rapport à la cible pour effectuer le processus de détection d'incident.
" 2 Prbcédé selon la revendication 1 , caractérisé par le fait que la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste :
- à déterminer au moins un premier point-image de ladite image réelle du paysage qui correspond à un point fixe dudit paysage, - à élaborer un premier signal d'ordre quand ledit premier point-image subit un changement de position sur ladite cible, et
- à commander ledit organe de traitement programmable en fonction dudit premier signal d'ordre.
3. Procédé selon la revendication 1 , caractérisé par le fait que la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste :
- à déterminer au moins deux deuxième et troisième points-images de ladite image réelle du paysage qui correspondent respectivement à deux points fixes dudit paysage,
- à élaborer un deuxième signal d'ordre quand la distance séparant lesdits deuxième et troisième points-images varie, et
- à commander ledit organe de traitement programmable en fonction du deuxième signal d'ordre.
4. Procédé selon la revendication 1 , caractérisé par le fait que la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste : - à déterminer au moins deux quatrième et cinquième points-images de ladite image réelle du paysage qui correspondent respectivement à deux points fixes dudit paysage,
- à élaborer un troisième signal d'ordre quand la distance séparant les quatrième et cinquième points-images varie et quand au moins l'un des deux quatrième et cinquième points-images subit un changement de position sur ladite cible, et
- à commander ledit organe de traitement programmable en fonction du troisième signal d'ordre. - - - -
5. Procédé selon l'une des revendications précédentes, caractérisé par le fait qu'il consiste à décomposer ladite cible en une pluralité de points photosensibles, lesdits points photosensibles étant aptes à délivrer des signaux en fonction de la quantité de rayonnement reçue sur leur surface photosensible.
6. Procédé selon la revendication 5, caractérisé par le fait que le processus de détection d'un incident sur ladite portion de voie lorsqu'elle est apte à être parcourue par des objets suivant son axe et suivant une trajectoire sensiblement imposée, consiste : - à sélectionner un groupe de points photosensibles dans ladite pluralité de points photosensibles de la cible, ce groupe de points sélectionné correspondant à des points de ladite portion de voie localisés sur une pluralité de lignes imaginaires principales, lesdites lignes imaginaires principales se situant au niveau du plan de ladite portion de voie et étant toutes sensiblement parallèles à l'axe de ladite trajectoire, et
- à analyser l'ensemble des signaux délivrés par les points photosensibles dudit groupe sélectionné.
7. Procédé selon la revendication 6, caractérisé par le fait que le processus de détection consiste en outre:
- à décomposer ledit groupe de points photosensibles sélectionné en une pluralité de sous-groupes de points photosensibles correspondant à des points de la portion de voie situés à l'intersection desdites lignes imaginaires principales et, respectivement, de lignes imaginaires secondaires sensiblement perpendiculaires aux lignes imaginaires principales, et
- à associer à chaque point photosensible d'un sous-groupe un coefficient multiplicateur de la valeur du signal émis par ce point, ce coefficient étant fonction de la probabilité de passage préférentiel des objets sur le point de la portion de voie qui a pour image le point photosensible associé à ce coefficient.
8. Procédé selon la revendication 7, caractérisé par le fait que les surfaces photosensibles de- réception desdits points photosensibles ont des dimensions sensiblement de même valeur.
9. Procédé selon la revendication 8, caractérisé par le fait que ladite analyse consiste :
- à effectuer une moyenne des valeurs des signaux délivrés, à des instants donnés, par les points de chaque sous-groupe, - à comparer, pour chaque sous-groupe, les moyennes ainsi obtenues, et
- à déduire, de cette comparaison, la présence éventuelle d'un incident sur ladite portion de voie.
10. Procédé selon l'une des revendications 1 à 9, caractérisé par le fait que la détection du début et de la fin du déplacement de l'image réelle du paysage par rapport à la cible consiste :
- à déterminer une pluralité de points-images de ladite image réelle du paysage qui correspond à une pluralité de points fixes au début du déplacement de l'image réelle,
- à élaborer un quatrième signal d'ordre quand, dans ladite pluralité de points-images, un nombre déterminé d'entre eux sont redevenus fixes à la fin du déplacement de l'image réelle, et - à commander ledit organe de traitement programmable en fonction dudit quatrième signal d'ordre.
PCT/FR2003/002188 2002-07-22 2003-07-11 Procede de detection d’incident sur route WO2004012168A2 (fr)

Priority Applications (3)

Application Number Priority Date Filing Date Title
AU2003273432A AU2003273432A1 (en) 2002-07-22 2003-07-11 Device for detecting an incident or the like on a traffic lane portion
EP03755590.1A EP1584079B1 (fr) 2002-07-22 2003-07-11 Procede de detection d'incident sur route
US10/521,606 US8055015B2 (en) 2002-07-22 2003-07-11 Method of detecting an incident or the like on a portion of a route

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR02/09251 2002-07-22
FR0209251A FR2842637B1 (fr) 2002-07-22 2002-07-22 Procede pour detecter un incident ou analogue sur une portion de voie

Publications (2)

Publication Number Publication Date
WO2004012168A2 true WO2004012168A2 (fr) 2004-02-05
WO2004012168A3 WO2004012168A3 (fr) 2004-04-08

Family

ID=29797615

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR2003/002188 WO2004012168A2 (fr) 2002-07-22 2003-07-11 Procede de detection d’incident sur route

Country Status (6)

Country Link
US (1) US8055015B2 (fr)
EP (1) EP1584079B1 (fr)
KR (1) KR101025383B1 (fr)
AU (1) AU2003273432A1 (fr)
FR (1) FR2842637B1 (fr)
WO (1) WO2004012168A2 (fr)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7870504B1 (en) 2003-10-01 2011-01-11 TestPlant Inc. Method for monitoring a graphical user interface on a second computer display from a first computer
FR2930668B1 (fr) * 2008-04-25 2010-06-18 Citilog Systeme d'aide a l'exploitation d'un reseau routier a qualite de service
US9240123B2 (en) 2013-12-13 2016-01-19 Here Global B.V. Systems and methods for detecting road congestion and incidents in real time
GB2547222A (en) 2016-02-10 2017-08-16 Testplant Europe Ltd Method of, and apparatus for, testing computer hardware and software

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4847772A (en) * 1987-02-17 1989-07-11 Regents Of The University Of Minnesota Vehicle detection through image processing for traffic surveillance and control
US5396283A (en) * 1991-03-19 1995-03-07 Mitsubishi Denki Kabushiki Kaisha Moving body measuring device and an image processing device for measuring traffic flows
WO1995016213A1 (fr) * 1993-12-08 1995-06-15 Minnesota Mining And Manufacturing Company Procede et appareil de determination et de soustraction d'arriere-plan pour systeme de vision monoculaire
WO1996022588A1 (fr) * 1995-01-17 1996-07-25 David Sarnoff Research Center, Inc. Procede et appareil de detection du mouvement d'objets dans une sequence d'images
FR2785432A1 (fr) * 1998-10-30 2000-05-05 Citilog Procede permettant d'analyser l'etat d'une portion de voie et de son environnement
WO2001033503A1 (fr) * 1999-11-03 2001-05-10 Cet Technologies Pte Ltd Techniques de traitement d'images pour un systeme de surveillance du trafic utilisant des images video et procedes connexes

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5296852A (en) * 1991-02-27 1994-03-22 Rathi Rajendra P Method and apparatus for monitoring traffic flow
JPH05344403A (ja) * 1992-06-10 1993-12-24 Sony Corp 撮像装置
JPH0630322A (ja) * 1992-07-10 1994-02-04 Canon Inc 自動合焦装置
BE1008236A3 (nl) * 1994-04-08 1996-02-20 Traficon Nv Verkeersbewakingsinrichting.
US5774569A (en) * 1994-07-25 1998-06-30 Waldenmaier; H. Eugene W. Surveillance system
US6188778B1 (en) * 1997-01-09 2001-02-13 Sumitomo Electric Industries, Ltd. Traffic congestion measuring method and apparatus and image processing method and apparatus
US6760061B1 (en) * 1997-04-14 2004-07-06 Nestor Traffic Systems, Inc. Traffic sensor
US6727938B1 (en) * 1997-04-14 2004-04-27 Robert Bosch Gmbh Security system with maskable motion detection and camera with an adjustable field of view
JP3759280B2 (ja) * 1997-04-15 2006-03-22 富士通株式会社 道路監視用事象検知装置
JP3567066B2 (ja) * 1997-10-31 2004-09-15 株式会社日立製作所 移動体組合せ検出装置および方法
AU4950899A (en) * 1998-07-31 2000-02-21 Cet Technologies Pte Ltd Automatic freeway incident detection system using artificial neural networks andgenetic algorithms
US6177885B1 (en) * 1998-11-03 2001-01-23 Esco Electronics, Inc. System and method for detecting traffic anomalies

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4847772A (en) * 1987-02-17 1989-07-11 Regents Of The University Of Minnesota Vehicle detection through image processing for traffic surveillance and control
US5396283A (en) * 1991-03-19 1995-03-07 Mitsubishi Denki Kabushiki Kaisha Moving body measuring device and an image processing device for measuring traffic flows
WO1995016213A1 (fr) * 1993-12-08 1995-06-15 Minnesota Mining And Manufacturing Company Procede et appareil de determination et de soustraction d'arriere-plan pour systeme de vision monoculaire
WO1996022588A1 (fr) * 1995-01-17 1996-07-25 David Sarnoff Research Center, Inc. Procede et appareil de detection du mouvement d'objets dans une sequence d'images
FR2785432A1 (fr) * 1998-10-30 2000-05-05 Citilog Procede permettant d'analyser l'etat d'une portion de voie et de son environnement
WO2001033503A1 (fr) * 1999-11-03 2001-05-10 Cet Technologies Pte Ltd Techniques de traitement d'images pour un systeme de surveillance du trafic utilisant des images video et procedes connexes

Also Published As

Publication number Publication date
AU2003273432A1 (en) 2004-02-16
EP1584079B1 (fr) 2019-04-03
US20050213791A1 (en) 2005-09-29
FR2842637B1 (fr) 2004-10-01
KR20050023402A (ko) 2005-03-09
KR101025383B1 (ko) 2011-03-28
EP1584079A2 (fr) 2005-10-12
US8055015B2 (en) 2011-11-08
FR2842637A1 (fr) 2004-01-23
WO2004012168A3 (fr) 2004-04-08

Similar Documents

Publication Publication Date Title
FR2822547A1 (fr) Releve en trois dimensions de l'environnement, notamment d'un vehicule routier
FR2718874A1 (fr) Procédé de surveillance de trafic pour la détection automatique d'incident de véhicules.
EP1868161B1 (fr) Procédé de détermination d'une distance de visibilité pour un conducteur de véhicule
CA2106115A1 (fr) Systeme de calcul d'au moins un parametre de controle de trafic de vehicules
EP1787465B1 (fr) Procede et dispositif pour stabiliser les images donnees par une camera video
EP0277050B1 (fr) Procédé de détermination de la trajectoire d'un corps apte à se déplacer sur une voie et dispositif de mise en oeuvre du procédé
EP0527665A1 (fr) Dispositif embarqué et procédé de repérage et de suivi de la position du véhicule sur la route et dipositif d'aide à la conduite en comportant application
EP0117162A1 (fr) Procédé pour la détection d'une source de chaleur notamment d'un incendie de forêt dans une zone surveillée, et système pour la mise en oeuvre de ce procédé
EP0716317B1 (fr) Dispositif de détection et de localisation d'objets au sol
FR2618543A1 (fr) Dispositif d'analyse de l'etat de surface d'un sol pour mobile apte a prendre contact avec ce sol
EP1584079B1 (fr) Procede de detection d'incident sur route
EP0276513B1 (fr) Dispositif de détection d'intrusion et de reconnaissance de véhicules terrestres
CA2006234A1 (fr) Procede et appareillage de surveillance automatique d'un site
EP1649699B1 (fr) PROCEDE POUR CALIBRER AU MOINS DEUX CAMERAS VIDEO L’UNE PAR RAPPORT A L’AUTRE POUR PRISES DE VUES STEREOSCOPIQUES ET DISPOSITIF PERMETTANT DE METTRE EN OEUVRE LE PROCEDE
FR3034067B1 (fr) Procede et dispositif d'assistance de conduite
EP2161677A1 (fr) Procédé de détection d'un objet cible pour véhicule automobile
EP0669535B1 (fr) Procédé et dispositif de mesure du déplacement relatif entre deux composants
FR2523341A1 (fr) Dispositif d'analyse de trafic de vehicules sur une chaussee
FR3051559B1 (fr) Procede d'optimisation de la detection de cibles marines et radar mettant en oeuvre un tel procede
EP1528409B1 (fr) Procédé et dispositif de mesure de la vitesse d'un véhicule en déplacement sur une trajectoire courbe déterminée
FR2679682A1 (fr) Procede pour detecter les changements de l'etat d'occupation d'une voie.
EP4080177B1 (fr) Procédé et système de contrôle du niveau sonore maximal lié au déplacement d'un véhicule
EP1614999A2 (fr) Systeme et procede de commande automatique de positionnement d'un element de detection de l'environnement, embarque a bord d'un vehicule automobile
FR2663420A1 (fr) Perfectionnement a un dispositif d'analyse de l'etat de surface d'un sol, pour mobile apte a prendre contact avec ce sol.
FR2785432A1 (fr) Procede permettant d'analyser l'etat d'une portion de voie et de son environnement

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NO NZ OM PH PL PT RO RU SD SE SG SK SL TJ TM TN TR TT TZ UA UG US UZ VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2003755590

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 1020057000408

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 10521606

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 1020057000408

Country of ref document: KR

WWP Wipo information: published in national office

Ref document number: 2003755590

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: JP

WWW Wipo information: withdrawn in national office

Country of ref document: JP