EP1910973A1 - Verfahren xmd system zur lebenderkennung bei retinaerkennung - Google Patents

Verfahren xmd system zur lebenderkennung bei retinaerkennung

Info

Publication number
EP1910973A1
EP1910973A1 EP06776629A EP06776629A EP1910973A1 EP 1910973 A1 EP1910973 A1 EP 1910973A1 EP 06776629 A EP06776629 A EP 06776629A EP 06776629 A EP06776629 A EP 06776629A EP 1910973 A1 EP1910973 A1 EP 1910973A1
Authority
EP
European Patent Office
Prior art keywords
eye
biometric
identification
verification
retina
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
EP06776629A
Other languages
English (en)
French (fr)
Inventor
Tilman Otto
Frank Müller
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Heidelberg Engineering GmbH
Original Assignee
Heidelberg Engineering GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Heidelberg Engineering GmbH filed Critical Heidelberg Engineering GmbH
Publication of EP1910973A1 publication Critical patent/EP1910973A1/de
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification

Definitions

  • the invention relates to a method for the biometric identification or verification of persons according to the features specified in the preamble of claim 1. Furthermore, the invention relates to a system for carrying out the method.
  • biometric comparison methods can be used both for the identification and for the verification of persons.
  • identification the identification of the identity takes place without prior knowledge (1: n comparison), wherein the characteristics of a person recorded biometrically with a method and / or system suitable for this purpose are compared with data records of a plurality of previously recorded persons in order to determine the identity.
  • records of the person in particular stored centrally in the biometric system.
  • verification the verification of a default (1: 1 comparison) takes place, wherein the biometrically recorded characteristics of a person are compared with the characteristics of a previously detected person for agreement.
  • the data set to be compared can be stored centrally in the biometric system or it is also possible to save the data record on a medium, such as a Chip card, with the person to be verified, the said medium provides the system.
  • a medium such as a Chip card
  • the biometric features from the captured image data are calculated. It is a fundamental problem of biometric methods that an image of the biometric object, such as fingertip, face or iris, may not be distinguishable from images or copies of the object, thus deceiving the biometric system and not ensuring the security of identification or verification can be.
  • biometric methods such as fingerprint, face, iris or speech
  • the biometric object is "freely" accessible. Since fingerprints are left everywhere, fingerprint systems can easily be outsmarted by copies.
  • iris scanner systems can be overcome relatively easily, for example by specially prepared and / or printed contact lenses or simply with photographs of the iris in the correct size ratio. It is relatively easy to make suitable copies of a biometrically measured identification object. It is a big problem of such biometric systems that it is usually not possible to decide whether the object presented for identification or verification is an original body part or just an image of it. Furthermore, any existing life detection, such as thermal, capacitive and the like, can be overcome by relatively simple technical measures.
  • the quality of biometric methods and / or systems for identification using pattern recognition algorithms is usually indicated by two characteristics, False Rejection Rate (FRR) and False Acceptance Rate (FAR).
  • the FRR indicates the percentage of persons or individuals mistakenly rejected by the system, although the two biometric data sets to be compared, although derived from the same individual, are not assessed consistently by the system. Ideally, this value is 0%.
  • the FAR indicates the percentage of individuals falsely verified by the system, where the two biometric characteristics datasets to be compared are not from the same individual, but are considered by the system to be consistent. This value is ideally also at 0%.
  • a device for scanning an object with a beam in two substantially orthogonal directions is known.
  • This is a diagnostic laser scanning system by means of which a continuous laser scanning formation of the retina with different wavelengths is feasible.
  • the device contains a first and a second scanner, each with a mirror whose axes of rotation extend in mutually orthogonal planes.
  • the mirror of the first scanner is deflected at a predetermined distance from its axis of rotation.
  • the center of the mirror of the second scanner is arranged in the middle of said distance between the axis of rotation and the mirror of the first scanner, wherein the beam from the mirror of the first scanner extends directly to the mirror of the second scanner.
  • an additional optical system is present in the beam path between said mirrors.
  • This laser scanning system which is also called Retinascanner allows a continuous imaging of the retina with different wavelengths, even without mydriasis or drug dilation of the pupil.
  • the object of the invention is to design the method and the system in such a way that overcoming security is decisively improved in a simple and reliable manner.
  • Manipulations, such as presentation of an image of the object intended for identification should be reliably detected, and furthermore the handling and / or the mode of operation should be simplified.
  • the method according to the invention and also the system proposed for carrying it out are characterized by a considerably improved overcoming security and / or optimized identification and / or verification of persons.
  • the retina is selected according to the invention as a biometric object, and complex information is exchanged between the biometric object and the biometric system via the retina during the biometric detection.
  • the movements of the eye are detected and taken into account.
  • involuntary movements of the eye as well as arbitrary, in particular pattern-dictated eye movements can be detected and taken into account.
  • the eye movement can be used to input information, for example a PIN (personal identification number), using the known and suitably stored and / or provided data. sentences and / or original images are already associated with corresponding information.
  • PIN personal identification number
  • This communication is tap-proof in the sense that an outside observer can not determine what information is exchanged. It is based on the finding that the human retina is difficult to access, especially as it can only be imaged with imaging systems and / or ophthalmological devices, in particular fundus cameras or laser scanning systems.
  • the object to be identified or the person to be checked records visual information about the retina during the identification and / or authentication process and at the same time also forwards selectively information to the system via predefinable movements and / or fixations of the eye.
  • This communication is secret, so that, for example, an outside observer can not determine what information is exchanged between the person and the system.
  • light stimuli can be projected onto the retina during image acquisition, the system, in particular by means of its biometric retina laser scanner, detecting the eye movements and / or fixations, in particular in real time.
  • the point to which the measured person fixes the eye is transmitted as information to the biometric system.
  • the projection of stationary targets can be provided for the projection of light stimuli onto the retina.
  • one of a plurality of stationary internal LED targets is randomly selected and projected onto the retina at short time intervals, preferably in the order of one second each. If the ocular fundus matches the stored biometric features and further the detected eye movements follow the faded in LEDs for a predetermined time, for example 2 to 3 seconds, the person is identified.
  • any pattern can be carried out, wherein preferably a second laser is modulated by means of a synchronous output unit in addition to the laser used for image recording or a display or a monitor or targets are used for the insertion.
  • the wavelength of the second laser is hidden by a filter, in particular in front of the detector, so that the superimposed pattern does not appear on the recorded image of the retina.
  • a visible laser can be used and modulated for the image acquisition, wherein the insertion takes place, in particular, alternately with the image acquisition or an inverse insertion takes place.
  • a check is carried out as to whether the eye follows or follows the predetermined movement and / or fixation and / or corresponding to the predetermined movement and / or fixation of the eye, an image shift, in particular by Image comparison with the or the stored original images, can be determined. If a movement of the eye from a position in which, in particular, the original image or a captured image of the eye is located in a certain direction, for example, top right, and given at a certain distance, it is checked whether the eye is the same has moved accordingly and / or fixed to the predetermined position and / or whether the detected image is displaced corresponding to the said direction and the distance.
  • the insertion of a continuously moving target can be provided, wherein the eye movement has to follow the movement of the target.
  • an additional display of a predetermined range such as an "alarm” and / or "silent alarm” may be provided and, depending thereon, for example a siren or a silent, in particular telephone, alarm be triggered.
  • the insertion of numbers or text can be provided in particular by means of a keyboard, wherein a PIN code or a password is entered via a brief fixing of the numbers and / or letters and / or other characters, without outside persons the code or the Spy out password.
  • an imaging device for detecting the biometric features of the retina is proposed as a biometric object, wherein during the detection and / or during the identification and / or authentication process via the retina pictorial information from the system are detected and preferably at the same time System via eye movements and / or fixation targeted information is transmitted.
  • System via eye movements and / or fixation targeted information is transmitted.
  • predetermined areas of the retina are detected and / or scanned, and in particular with corresponding stored original images or areas or derived therefrom data sets of the image comparison is performed.
  • FIG. 1 is a block diagram
  • FIG. 2 shows a flowchart
  • Figure 3 is a numeric keypad for insertion of a fade-in pattern.
  • an optical unit 2 for detecting biometric features of an eye 4 is provided.
  • the optical unit is followed by a detection unit 6, by means of which the captured image data provided and supplied as electrical signals to a computer 8, which contains in particular a CPU / MCU.
  • a projection unit 10 is provided, which drives the optical unit 2 in accordance with the data received from the computer 8.
  • the optical unit 2 includes a lens, which in particular has a fixed focus on zero D, so that the use with glasses or contact lens is possible.
  • the optical unit 2 includes an imaging system, such as an optical block having an X and Y scanner with a predetermined fixed angle of view. The angle of view is preferably in the range of 20 ° and larger, optionally advantageously 30 °.
  • the optical unit 2 contains the above-described means for overcoming security, in particular in the form of target LEDs.
  • an infrared distance sensor is advantageously provided, by means of which the system or the device is activated when the head of the person to be checked approaches.
  • an optical block according to EP 0 498 280 B1 mentioned in the introduction.
  • the light source in particular, an IR laser diode may be provided, but if necessary, the Lighting be performed by means of LED.
  • any light source such as a green or red laser diode, may be included.
  • the computer 8 or the entire electronics of the system includes a controller board for the control of scanner and laser. Furthermore, the electronic units for image capture (ADC), for storing comparison data sets, in particular in a flash, for displaying patterns for communication with the person, for the evaluation of eye movements as well as for the biometric evaluation or identification and / or Verification.
  • ADC image capture
  • the computer unit 8 or electronics suitably contains a separate emergency unlocking electronics, a particular 8-bit microcontroller, an internal and / or external power supply and a standardized interface, in particular as a RS232 connection, to unlock the system through a service computer.
  • the microcontroller may be designed such that a random data key, for example 1024 bytes, is generated and transmitted to the service computer.
  • the data key is provided in such a way that the service computer advantageously generates from those according to a secret algorithm an enabling code of, for example, 1024 bytes and transmits this to the microcontroller.
  • said microcontroller is arranged separately from the other components of the electronics or of the computer unit 8, in particular in a separate housing, in order, for example, to avoid a total loss in the event of a fire.
  • the computer unit 8 is advantageously designed such that the application software can be loaded in a simple manner, in particular from a flash.
  • the image processing preferably takes place in real time and also the pattern recognition.
  • the flowchart according to FIG. 2 shows the essential procedural steps as function blocks.
  • block 12 the person looks into the imaging system with one eye, and according to the invention the projection of a specific and / or predeterminable pattern onto the retina of the eye takes place according to the invention.
  • block 16 image acquisition of the retina is performed by the system in a known manner, in particular by means of a retinal scanner.
  • block 18 the image comparison according to the invention performed with stored and / or provided original images. If an image identification can not take place, the method from block 14 is repeated according to line 20. If, on the other hand, the image of the retina is identified, then according to block 22 the determination according to the invention of the fixation, thus of the eye position, takes place with respect to the projected pattern.
  • this determination can be made by means of an external and / or fade-in pattern, for example in the form of the image of a keyboard.
  • the involuntary and / or unavoidable movements or movement patterns of the eye can also be used for the determination.
  • the eye movement can be used to input information, such as a PIN, for which purpose corresponding information is assigned to the provided and / or stored original images or their data records, said information being compared for identification and / or verification , If, according to block 24, the communication process can not be completed, line 26 returns to block 14, in particular to change the pattern if necessary. Upon a positive completion of the communication process, the person is identified in block 28. It should be noted that the communication process between the biometric location, namely the retina, and the system significantly increases its overcoming security, because a fake retina, such as a pictorial copy, could be identified figuratively but not participate in the active communication process ,
  • Figure 3 shows an example of a fade-in pattern in the form of an image of a keyboard 30.
  • a pin code or password can be entered.
  • "Enter" for example, the fixation on the display of "Alarm” one such triggered.
  • the following alternatives for detecting and taking into account eye movements are preferably used:
  • the involuntary movements of the eye are detected for living recognition.
  • Patterns of random eye movement are predefined, in particular a projection of the pattern into the eye or the recognition of an external pattern. Eye movement is used to input information, with corresponding information associated with the original images or their datasets.

Abstract

Die Erfindung bezieht sich auf ein Verfahren zur biometrischen Identifikation oder Verifikation von Personen, wobei mittels einer bildgebenden Einrichtung biometrische Merkmale erfasst werden und mittels der erfassten Bilddaten, insbesondere durch Vergleich mit bekannten Datensätzen und/oder Originalbildern, die Identifikation oder Verifikation durchgeführt wird. Ferner bezieht sich die Erfindung auf ein System zur Durchführung des Verfahrens. Es liegt die Aufgabe zugrunde, das Verfahren und das System dahingehend auszubilden, dass in einfacher Weise und sicherer Funktion die Überwindungssicherheit entscheidend verbessert wird. Hierzu wird vorgeschlagen, dass die Retina des Auges als biometrisches Objekt zur Erfassung der biometrischen Merkmale vorgesehen wird und dass Bewegungen und/oder Fixationen des Auges erfaßt und berücksichtigt werden.

Description

VERFAHREN XMD SYSTEM ZUR LEBENDERKENNUNG BEI RETNAERKENNUNG
Die Erfindung bezieht sich auf ein Verfahren zur biometrischen Identifikation oder Verifikation von Personen gemäß den im Oberbegriff des Patentanspruchs 1 angegebenen Merkmalen. Ferner bezieht sich die Erfindung auf ein System zur Durchführung des Verfahrens.
Bekanntlich können biometrische Vergleichsmethoden sowohl zur Identifikation als auch zur Verifikation von Personen herangezogen werden. Bei der Identifikation erfolgt die Erkennung der Identität ohne Vorwissen (1 :n-Vergleich), wobei die biometrisch mit einem hierzu geeigneten Verfahren und/oder System erfassten Merkmale einer Person mit Datensätzen von mehreren zuvor erfassten Personen zwecks Feststellung der Identität verglichen werden. Hierbei sind Datensätze der Person, insbesondere zentral in dem biometrischen System gespeichert. Bei einer Verifikation erfolgt die Überprüfung einer Vorgabe (1 :1 -Vergleich), wobei die biometrisch erfassten Merkmale einer Person mit den Merkmalen einer zuvor erfassten Person auf Übereinstimmung verglichen werden. Der zu vergleichende Datensatz kann zentral im biometrischen System hinterlegt sein oder es besteht ferner die Möglichkeit, den Datensatz auf einem Medium, wie z.B. einer Chipkarte, zu speichern, wobei die zu verifizierende Person das genannte Medium dem System zur Verfügung stellt. Sowohl bei der Identifikation als auch bei der Verifikation werden die biometrischen Merkmale aus den erfassten Bilddaten rechnerisch ermittelt. Es ist ein grundsätzliches Problem biometrischer Verfahren, dass ein Bild des biometrischen Objekts, wie Fingerkuppe, Gesicht oder Iris, gegebenenfalls nicht von Abbildern bzw. Kopien des Objekts unterschieden werden kann, und somit das biometrische System getäuscht und die Sicherheit der Identifikation oder Verifikation nicht sichergestellt werden kann. So ist bei gängigen biometrischen Methoden, wie Fingerabdruck, Gesicht, Iris oder Sprache, das biometrische Objekt "frei" zugänglich. Da Fingerabdrücke überall hinterlassen werden, können Fingerabdrucksysteme durch Kopien leicht überlistet werden. Auch Iris-Scannersysteme können relativ leicht überwunden werden, beispielsweise durch speziell präparierte und/oder bedruckte Kontaktlinsen oder einfach mit Fotografien der Iris im richtigen Größenverhältnis. Es ist relativ einfach, geeignete Kopien eines biometrisch vermessenen Identifikationsobjekts zu erstellen. Es ist ein großes Problem derartiger biometrischer Systeme, dass in der Regel nicht entschieden werden kann, ob es sich bei dem zur Identifikation oder Verifikation präsentierten Objekt um ein originales Körperteil oder nur um eine Abbildung desselben handelt. Des Weiteren ist eine eventuell vorhandene Lebenderkennung, wie beispielsweise thermisch, kapazitiv und dergleichen, durch relativ einfache technische Maßnahmen überwindbar. Die Qualität biometrischer Verfahren und/oder Systeme zur Identifikation, wobei Mustererkennungs-Algorithmen zum Einsatz gelangen, wird üblicherweise über zwei Kenngrößen angegeben und zwar Falschrückweisungs-Rate (FRR) und die Falschakzeptanz-Rate (FAR). Die FRR gibt den Prozentsatz der vom System fälschlicherweise zurückgewiesenen Personen bzw. Individuen an, wobei die beiden zu vergleichenden Datensätze biometrischer Merkmale zwar vom gleichen Individuum stammen, aber vom System nicht übereinstimmend bewertet werden. Im Idealfall liegt dieser Wert bei 0%. Die FAR gibt den Prozentsatz der vom System fälschlicherweise verifizierte Individuen an, wobei die beiden zu vergleichenden Datensätze biometrischer Merkmale nicht vom gleichen Individuum stammen, jedoch vom System als übereinstimmend bewertet werden. Auch dieser Wert liegt im Idealfall ebenfalls bei 0%.
Aus der EP 0 498 280 B1 , welche auf die Anmelderin, Heidelberg Engineering GmbH, zurückgeht, ist eine Vorrichtung zum Abtasten eines Objektes mit einem Strahlenbündel in zwei im Wesentlichen orthogonalen Richtungen bekannt. Es handelt sich hierbei um ein diagnostisches Laser-Scanningsystem, mittels welchem eine kontinuierliche Ab- bildung der Retina mit verschiedenen Wellenlängen durchführbar ist. Die Vorrichtung enthält einen ersten und einen zweiten Scanner mit jeweils einem Spiegel, deren Drehachsen in zueinander orthogonalen Ebenen verlaufen. Der Spiegel des ersten Scanners ist in einem vorgegeben Abstand von seiner Drehachse abgebracht. Der Mittelpunkt des Spiegels des zweiten Scanners ist in der Mitte des genannten Abstandes zwischen der Drehachse und dem Spiegel des ersten Scanners angeordnet, wobei das Strahlenbündel vom Spiegel des ersten Scanners direkt zum Spiegel des zweiten Scanners verläuft. Im Strahlengang zwischen den genannten Spiegeln ist ein zusätzliches optisches System vorhanden. Dieses Laser-Scanningsystem, welches auch als Retinascanner bezeichnet wird, ermöglicht eine kontinuierliche Abbildung der Retina mit verschiedenen Wellenlängen, und zwar auch ohne Mydriasis bzw. medikamentöse Weitstellung der Pupille.
Hiervon ausgehend liegt der Erfindung die Aufgabe zugrunde, das Verfahren und das System dahingehend auszubilden, dass in einfacher Weise und sicherer Funktion die Überwindungssicherheit entscheidend verbessert wird. Manipulationen, wie zum Beispiel Präsentation einer Abbildung des zur Identifikation vorgesehenen Objektes sollen sicher erkannt werden und ferner sollen die Handhabung und/oder die Funktionsweise vereinfacht werden.
Die Lösung dieser Aufgabe erfolgt hinsichtlich des Verfahrens gemäß der im Patentanspruch 1 angegebenen Merkmalen. Hinsichtlich des Systems erfolgt die Lösung gemäß dem auf das System gerichteten nebengeordneten Patentanspruch,
Das erfindungsgemäße Verfahren und ebenso das zur Durchführung desselben vorgeschlagene System zeichnen sich durch eine erheblich verbesserte Überwindungssicherheit und/oder optimierte Identifikation und/oder Verifikation von Personen aus. Im Gegensatz zu anderen biometrischen Objekten wird erfindungsgemäß die Retina als biometrisches Objekt ausgewählt, und über die Retina werden während der biometrischen Erfassung komplexe Informationen zwischen dem biometrischen Objekt und dem biometrischen System ausgetauscht. Die Bewegungen des Auges werden erfaßt und berücksichtigt. So können unwillkürliche Bewegungen des Auges ebenso wie willkürliche, insbesondere durch Muster vorgegebene Augenbewegungen erfaßt und berücksichtigt werden. Des Weiteren kann die Augenbewegung zur Eingabe von Informationen, beispielsweise einer PIN (persönliche Identifikationsnummer), genutzt werden, wobei den bekannten und in geeigneter Weise gespeicherten und/oder bereitgestellten Daten- sätzen und/oder Originalbildern bereits korrespondierende Informationen zugeordnet sind. Diese Kommunikation ist in dem Sinne abhörsicher, dass ein außenstehender Beobachter nicht feststellen kann, welche Information ausgetauscht wird. Es liegt die Erkenntnis zugrunde, dass die menschliche Retina nur schwer zugänglich ist, zumal sie nur mit Bild gebenden Systemen und/oder ophthalmologischen Geräten, wie insbesondere Funduskameras oder Laser-Scanningsysteme, abgebildet werden kann. Das zu identifizierende Objekt bzw. die zu überprüfende Person erfasst während des Identifizierungs- und/oder Authentifizierungs-Prozesses über die Retina bildliche Informationen und übermittelt ferner gleichzeitig dem System über vorgebbare Bewegungen und/oder Fixationen des Auges gezielt Informationen. Diese Kommunikation ist geheim, so dass beispielsweise ein außen stehender Beobachter nicht feststellen kann, welche Informationen zwischen der Person und dem System ausgetauscht werden. So können auf die Retina während der Bilderfassung Lichtreize projiziert werden, wobei das System, insbesondere mittels dessen biometrischen Retina-Laser-Scanner die Augenbewegungen und/oder Fixationen insbesondere in Echt-Zeit erfasst. Als Information an das biometrische System wird insbesondere die Stelle übertragen, auf weiche die gemessene Person das Auge fixiert. Für die Projektion von Lichtreizen auf die Retina kann insbesondere die Projektion ortsfester Targets vorgesehen sein. Hierbei wird in kurzen zeitlichen Abständen, vorzugsweise in der Größenordnung jeweils einer Sekunde, eines von mehreren ortsfesten internen LED-Targets nach dem Zufallsprinzip ausgewählt und auf die Netzhaut projiziert. Falls der Augenhintergrund mit den gespeicherten biometrischen Merkmalen übereinstimmt und ferner die ermittelten Augenbewegungen den eingeblendeten LEDs für eine vorgegebene Zeit, beispielsweise 2 bis 3 Sekunden, folgen, so ist die Person identifiziert. Weiterhin kann die Projektion beliebiger Muster erfolgen, wobei bevorzugt mittels einer bildsynchronen Ausgabe-Einheit zusätzlich zu dem für die Bildaufnahme zum Einsatz gelangenden Laser ein zweiter Laser moduliert wird oder ein Display oder ein Monitor oder Targets für die Einblendung benutzt werden. Vorteilhaft wird die Wellenlänge des zweiten Lasers durch ein Filter, insbesondere vor dem Detektor, ausgeblendet, so dass das eingeblendete Muster auf dem aufgenommenen Bild der Retina nicht erscheint. Alternativ kann ein sichtbarer Laser für die Bildaufnahme verwendet und moduliert werden, wobei die Einblendung insbesondere alternierend mit der Bildaufnahme erfolgt bzw. eine inverse Einblendung erfolgt. Erfindungsgemäß wird eine Überprüfung durchgeführt, ob das Auge der vorgegebenen Bewegung und/oder Fixation folgt bzw. gefolgt ist und/oder korrespondierend zur vorgegebenen Bewegung und/oder Fixation des Auges eine Bildverschiebung, insbesondere durch Bildvergleich mit dem oder den gespeicherten Originalbildern, festgestellt werden kann. Wird eine Bewegung des Auges ausgehend von einer Position, in welcher insbesondere das Originalbild oder ein erfasstes Bild des Auges sich befindet, in eine bestimmte Richtung, beispielsweise nach rechts oben, und in einen bestimmten Abstand vorgegeben, so wird geprüft, ob sich das Auge gleichfalls entsprechend bewegt hat und/oder auf die vorgegebene Position fixiert ist und/oder ob das erfasste Bild korrespondierend zu der genannten Richtung und dem Abstand verschoben ist.
Weiterhin können zusätzlich oder alternativ zu der willkürlichen und/oder vorgebbaren Fixation der zu messenden und/oder zu identifizierenden Person und/oder deren Auge auch Vorgaben an überlagerte unwillkürliche und/oder unvermeidbare Bewegungsmuster, wie Sakkadden oder Driftbewegung, gestellt werden, um die Lebenderkennung zu ermöglichen oder noch weiter zu verbessern. Mittels des erfindungsgemäßen Verfahrens und/oder Systems kann in vorteilhafter Weise mit hoher Sicherheit entschieden werden, ob es sich bei dem zur Identifikation präsentierten Objekt um ein originales Körperteil, nämlich das Auge, oder nur um eine Abbildung desselben handelt, da es sich ja bei dieser Abbildung nicht um eine "sehende" Retina handelt und somit die geforderte Kommunikation mit dem biometrisch vermessenen Objekt nicht (oder ggfs. nur mit extremem technischen Aufwand) stattfinden kann. Für einblendbare Muster kann beispielsweise die Einblendung eines sich kontinuierlich bewegenden Targets vorgesehen sein, wobei die Augenbewegung der Bewegung des Targets zu folgen hat. Ferner kann eine zusätzliche Einblendung eines vorgegebenen Bereiches, wie eines "Alarm" und/oder "stiller Alarm", vorgesehen sein und in Abhängigkeit hiervon beispielsweise eine Sirene oder ein stiller, insbesondere telefonischer, Alarm ausgelöst werden. Des Weiteren kann die Einblendung von Zahlen oder Text insbesondere mittels einer Tastatur vorgesehen sein, wobei über ein kurzes Fixieren der Zahlen und/oder Buchstaben und/der sonstiger Zeichen ein PIN-Code oder ein Passwort eingegeben wird, ohne dass außenstehende Personen den Code oder das Passwort ausspähen können.
Erfindungsgemäß wird die Verwendung einer bildgebenden Einrichtung zur Erfassung der biometrischen Merkmale der Retina als biometrisches Objekt vorgeschlagen, wobei während der Erfassung und/oder während des Identifizierungs- und/oder Authentifizierungs-Prozesses über die Retina bildliche Informationen aus dem System erfasst werden und bevorzugt gleichzeitig dem System über Augenbewegungen und/oder Fixation gezielt Informationen übermittelt werden. In Abhängigkeit der vor- gegebenen Bewegungen und/oder der Positionierung und/oder der Fixierung des Auges werden bevorzugt vorgegebene Bereiche der Retina erfasst und/oder gescannt, und insbesondere mit korrespondierenden gespeicherten Originalbildern oder Bereichen oder daraus abgeleiteten Datensätzen derselben wird der Bildvergleich durchgeführt.
Weiterbildungen und besondere Ausgestaltungen der Erfindung sind in den Unteransprüchen und der nachfolgenden Beschreibung eines Ausführungsbeispiels angegeben.
Die Erfindung wird nachfolgend anhand des in der Zeichnung dargestellten Ausführungsbeispiels näher erläutert. Es zeigen:
Figur 1 ein Blockschaltbild,
Figur 2 einen Ablaufplan,
Figur 3 eine Zahlentastatur zur Einblendung eines einblendbaren Musters.
Gemäß Figur 1 ist eine Optik-Einheit 2 zur Erfassung biometrischer Merkmale eines Auges 4 vorgesehen. Der Optik-Einheit ist eine Detektionseinheit 6 nachgeschaltet, mittels welcher die erfassten Bilddaten bereit gestellt und als elektrische Signale einem Rechner 8 zugeführt werden, welcher insbesondere eine CPU/MCU enthält. Des Weiteren ist eine Projektionseinheit 10 vorgesehen, welche entsprechend der vom Rechner 8 erhaltenen Daten die Optik-Einheit 2 ansteuert. Die Optik-Einheit 2 enthält ein Objektiv, welches insbesondere einen festen Fokus auf Null D besitzt, so dass der Einsatz mit Brille oder Kontaktlinse ermöglicht ist. Des Weiteren enthält die Optik-Einheit 2 ein Bild gebendes System, wie insbesondere einen Optikblock mit einem X- und Y-Scanner mit einem vorgegebenen festen Bildwinkel. Der Bildwinkel ist bevorzugt im Bereich von 20° und größer, gegebenenfalls vorteilhaft von 30°, vorgegeben. Des Weiteren enthält die Optik-Einheit 2 die oben erläuterten Mittel für die Überwindungssicherheit, insbesondere in Form von Target-LEDs. Auch ist in vorteilhafter Weise ein Infrarot-Abstandsensor vorgesehen, mittels welchem das System bzw. das Gerät aktiviert wird, wenn sich der Kopf der zu überprüfenden Person nähert. Bedarfsweise kann ferner auch ein Optikblock gemäß der eingangs erwähnten EP 0 498 280 B1 verwendet sein. Als Lichtquelle kann insbesondere eine IR-Laserdiode vorgesehen sein, doch kann gegebenenfalls die Beleuchtung mittels LED durchgeführt werden. Darüber hinaus kann für die Einblendung von Mustern für die Überwindungssicherheit eine beliebige Lichtquelle, beispielsweise ein grüne oder rote Laserdiode, enthalten sein.
Der Rechner 8 bzw. die gesamte Elektronik des Systems enthält ein Controllerboard für die Steuerung von Scanner und Laser. Des Weiteren enthält die Elektronik-Einheiten zur Bilderfassung (ADC), zur Speicherung von Vergleichsdatensätzen, insbesondere in einem Flash, zur Einblendung von Mustern für die Kommunikation mit der Person, für die Auswertung von Augenbewegungen sowie für die biometrische Auswertung bzw. Identifikation und/oder Verifikation. In einer besonderen Ausgestaltung, beispielsweise für eine Schließanlage oder eine Tresorverriegelung, enthält die Rechner-Einheit 8 bzw. Elektronik in zweckmäßiger Weise eine separate Notentriegelungs-Elektronik, einen insbesondere 8 Bit MikroController, eine interne und/oder externe Stromversorgung sowie eine standardisierte Schnittstelle, insbesondere als RS232 Anschluss, zum Entsperren des Systems durch einen Service-Computer. So kann der MikroController beispielsweise dahingehend ausgebildet sein, dass ein zufälliger Datenschlüssel, beispielsweise 1024 Bytes, generiert wird und dieser an den Service-Computer übertragen wird. Der Datenschlüssel ist dahingehend vorgesehen, dass der Service-Computer aus jenen nach einem geheimen Algorithmus in vorteilhafter Weise einen Freischaltungscode von beispielsweise 1024 Bytes generiert und diesen an den MikroController überträgt. Mittels des Mikrocontrollers erfolgt die Überprüfung des Freischaltcodes und gegebenenfalls die Freigabe des Systems. In zweckmäßiger Weise ist insbesondere der genannte Mikro- controller separat von den übrigen Komponenten der Elektronik bzw. der Rechnereinheit 8, insbesondere in einem separaten Gehäuse, angeordnet, um beispielsweise im Brandfalle einen Totalschaden zu vermeiden. Die Rechner-Einheit 8 ist in vorteilhafter Weise dahingehend ausgebildet, dass die Anwendungs-Software in einfacher Weise, insbesondere aus einem Flash, geladen werden kann. Mittels der Software erfolgt die Bildverarbeitung vorzugsweise in Echtzeit und ebenso die Mustererkennung.
Der Ablaufplan gemäß Figur 2 zeigt als Funktionsblöcke die wesentlichen Verfahrensschritte. Gemäß Block 12 blickt die Person mit einem Auge in das bildgebende System und gemäß Block 14 erfolgt erfindungsgemäß die Projektion eines bestimmten und/oder vorgebbaren Musters auf die Retina des Auges. Wie mit Block 16 dargestellt, erfolgt mittels des Systems in bekannter Weise, insbesondere mittels eines Retina-Scanners, die Bilderfassung der Retina. Gemäß Block 18 wird erfindungsgemäß der Bildvergleich mit gespeicherten und/oder bereit gestellten Originalbildern durchgeführt. Kann eine Bild-Identifikation nicht erfolgen, so wird gemäß Linie 20 das Verfahren ab Block 14 wiederholt. Wird hingegen das Bild der Retina identifiziert, so erfolgt gemäß Block 22 die erfindungsgemäße Bestimmung der Fixation, somit der Augenposition, bezüglich dem projizierten Muster. Alternativ kann gemäß Block 22 diese Bestimmung mittels eines externen und/oder einblendbaren Musters, beispielsweise in Form des Bildes einer Tastatur erfolgen. Des Weiteren können im Rahmen der Erfindung auch die unwillkürlichen und/oder unvermeidbaren Bewegungen oder Bewegungsmuster des Auges für die Bestimmung genutzt werden. Schließlich kann alternativ gemäß Block 22 die Augenbewegung zur Eingabe einer Information, wie beispielsweise eine PIN, genutzt werden, wobei hierzu korrespondierende Informationen den bereitgestellten und/oder gespeicherten Originalbildern oder deren Datensätzen zugeordnet sind, wobei die genannten Informationen zur Identifikation und/oder Verifikation verglichen werden. Kann gemäß Block 24 der Kommunikations-Prozess nicht abgeschlossen werden, so wird gemäß Linie 26 auf Block 14 zurück gegangen, insbesondere um das Muster gegebenenfalls zu ändern. Bei positivem Abschluss des Kommunikationsprozesses ist gemäß Block 28 die Person identifiziert. Es sei festgehalten, dass durch den Kommunikationsprozess zwischen dem biometrischen Ort, und zwar der Retina, und dem System dessen Überwindungssicherheit entscheidend erhöht wird, denn eine gefälschte Retina, wie beispielsweise ein bildliche Kopie, könnte zwar bildlich identifiziert werden, aber nicht am aktiven Kommunikationsprozess teilnehmen.
Figur 3 zeigt ein Beispiel für ein einblendbares Muster in Form eines Bildes einer Tastatur 30. Durch kurzes Fixieren der Ziffern kann ein Pin-Code oder Passwort eingegeben werden. Zusätzlich kann durch Einblendung von "Enter" beispielsweise die Fixation auf die Einblendung von "Alarm" ein solcher ausgelöst werden.
Erfindungsgemäß gelangen bevorzugt die nachfolgend angegebenen Alternativen zur Erfassung und Berücksichtigung der Augenbewegungen zur Anwendung:
Die unwillkürlicen Bewegungen des Auges werden zur Lebenderkennung erfaßt.
Es werden Muster der willkürlichen Augenbewegung vorgegeben, wobei insbesondere eine Projektion des Musters ins Auge oder die Erkennung eines externen Musters erfolgt. Die Augenbewegung wird zur Eingabe von Informationen genutzt, wobei korrespondierende Informationen den Originalbildern oder deren Datensätzen zugeordnet sind.
Bezugszeichen
Optik-Einheit Auge Detektions-Einheit Rechner-Einheit, CPU / MCU Projektions-Einheit - 18 Funktionsblock Linie , 24 Funktionsblock
Linie
Funktionsblock
Zahlentastatur

Claims

Patentansprüche
1. Verfahren zur biometrischen Identifikation oder Verifikation von Personen, wobei mittels einer bildgebenden Einrichtung biometrische Merkmale erfasst werden und mittels der erfassten Bilddaten, insbesondere durch Vergleich mit bekannten Datensätzen und/oder Originalbildern, die Identifikation oder Verifikation durchgeführt wird, dadurch gekennzeichnet, dass die Retina des Auges als biometrisches Objekt zur Erfassung der biometrischen Merkmale vorgesehen wird und dass Bewegungen und/oder Fixationen des Auges erfaßt und berücksichtigt werden.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass während des Identifizierungs- und/oder Authentifizierungs-Prozesses der Person über die Retina bildliche Informationen bereit gestellt werden und dass gleichzeitig dem System über vorgebbare Bewegungen und/oder Fixationen des Auges gezielt Informationen übermittelt werden.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass während der geannten Erfassung über vorgebbare Bewegungen und/oder Fixationen des Auges Informationen für die Identifikation oder Verifikation erfasst und/oder bereit gestellt werden.
4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass korrespondierend zu den Bewegungen oder Stellungen des Auges aus gespeicherten Datensätzen und/oder Originalbildern, insbesondere daraus ausgewählte Bereiche mit dem erfassten Bild des Auges verglichen werden.
5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass in Abhängigkeit einer vorgebbaren Bewegung und/oder Positionierung und/oder Fixierung des Auges bevorzugt vorgegebene Bereiche der Retina erfasst und/oder gescannt werden und mit korrespondierenden und/oder ausgewählten Bereichen des gespeicherten Bildes oder daraus abgeleiteten Datensätzen verglichen werden.
6. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass zunächst ein Bildvergleich oder Datenvergleich mit gespeicherten Originalbildern oder daraus abgeleiteten Datensätzen durchgeführt und eine Bildidentifikation vorgenommen wird und dass nachfolgend die Augenbewegung erfaßt wird oder hierfür die Bestimmung der Fixation und/oder der Augenposition und/oder der Augenbewegung bezüglich eines projizierten oder eingeblendeten Musters durchgeführt wird.
7. Verfahren nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass während der biometrischen Erfassung über die Retina zwischen dieser und dem biometrischen System komplexe Informationen ausgetauscht werden.
8. Verfahren nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass zumindest während der Bilderfassung Lichtreize und/oder Lichtsignale auf die Retina projiziert und/oder eingeblendet werden.
9. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass eine Überprüfung durchgeführt wird, ob das Auge der vorgegebenen Bewegung und/oder Fixation folgt oder gefolgt ist und/oder ob korrespondierend zu der vorgegebenen Bewegung und/oder Fixation des Auges eine Verschiebung des erfassten Bildes und/oder dessen Daten festgestellt wird.
10. System zur biometrischen Identifikation oder Verifikation von Personen, enthaltend eine bildgebende Einrichtung zur Erfassung biometrischer Merkmale sowie eine Rechner-Einheit, mittels welcher die erfassten Bilddaten, insbesondere durch Vergleich mit bekannten Datensätzen die Identifikation oder Verifikation durchführbar ist, gekennzeichnet durch die Ausbildung zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 9.
EP06776629A 2005-08-05 2006-08-04 Verfahren xmd system zur lebenderkennung bei retinaerkennung Ceased EP1910973A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102005037675 2005-08-05
PCT/EP2006/007758 WO2007017207A1 (de) 2005-08-05 2006-08-04 Verfahren xmd system zur lebenderkennung bei retinaerkennung

Publications (1)

Publication Number Publication Date
EP1910973A1 true EP1910973A1 (de) 2008-04-16

Family

ID=37081627

Family Applications (1)

Application Number Title Priority Date Filing Date
EP06776629A Ceased EP1910973A1 (de) 2005-08-05 2006-08-04 Verfahren xmd system zur lebenderkennung bei retinaerkennung

Country Status (4)

Country Link
US (1) US8184867B2 (de)
EP (1) EP1910973A1 (de)
JP (2) JP2009502382A (de)
WO (1) WO2007017207A1 (de)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL184399A0 (en) * 2007-07-03 2007-10-31 Yossi Tsuria Content delivery system
JP5277365B2 (ja) * 2008-04-06 2013-08-28 国立大学法人九州工業大学 個人認証方法及びそれに使用する個人認証装置
CN102439607B (zh) * 2009-05-21 2015-05-20 惠普开发有限公司 单独图示符的生成和用于检查单独图示符的系统和方法
US20140079296A1 (en) * 2012-07-13 2014-03-20 Retina Biometrix, Llc Biometric identification via retina scanning
US9808154B2 (en) * 2012-07-13 2017-11-07 Retina Biometrix, Llc Biometric identification via retina scanning with liveness detection
GB201212878D0 (en) 2012-07-20 2012-09-05 Pike Justin Authentication method and system
US8856541B1 (en) * 2013-01-10 2014-10-07 Google Inc. Liveness detection
TW201518979A (zh) * 2013-11-15 2015-05-16 Utechzone Co Ltd 手持式眼控接目裝置、及密碼輸入裝置、方法以及電腦可讀取記錄媒體及電腦程式產品
DE102014203444A1 (de) * 2014-02-26 2015-08-27 Application Solutions (Electronics and Vision) Ltd. Vorrichtung und Verfahrung zur Ermittlung eines Augenzustands eines Fahrzeuginsassen
GB201520760D0 (en) 2015-05-27 2016-01-06 Mypinpad Ltd And Licentia Group Ltd Encoding methods and systems
WO2017062189A1 (en) * 2015-08-27 2017-04-13 Retina Biometrix, Llc Biometric identification via retina scanning with liveness detection
JP6728699B2 (ja) 2016-01-15 2020-07-22 富士通株式会社 生体認証装置、生体認証方法および生体認証プログラム
DE102016011992A1 (de) 2016-09-30 2018-04-05 LÜTH & DÜMCHEN Automatisierungsprojekt GmbH Verfahren zur Lebenderkennung mittels Nachweis von planmäßig erzeugten Reflexionen im Auge einer Person für Vorrichtungen zur Erfassung personenspezifischer Daten
US11544359B2 (en) * 2016-11-08 2023-01-03 Proprius Technolgies S.A.R.L Unique patterns extracted from involuntary eye motions to identify individuals
JP7045387B2 (ja) 2017-01-05 2022-04-01 ハイデルベルク エンジニアリング ゲゼルシャフト ミット ベシュレンクテル ハフツング 車両の運転者の視覚認知能力の制限を認識するための方法、及び、装置
JP2019185384A (ja) * 2018-04-10 2019-10-24 キヤノン株式会社 画像認証装置、画像認証方法、コンピュータプログラムおよび記憶媒体
FR3086399B1 (fr) * 2018-09-24 2021-09-17 Commissariat Energie Atomique Systeme de vision en realite virtuelle ou augmentee avec capteur d'image de l'œil, et procede associe
US11737665B2 (en) 2019-06-21 2023-08-29 Tesseract Health, Inc. Multi-modal eye imaging with shared optical path
JP2023511893A (ja) * 2020-01-27 2023-03-23 日本電気株式会社 凝視に基づくライブネス検出のための情報処理装置、情報処理方法、およびプログラム
WO2023166603A1 (ja) * 2022-03-02 2023-09-07 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030091215A1 (en) * 2000-05-16 2003-05-15 Eric Lauper Biometric identification and authentication method

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4109237A (en) * 1977-01-17 1978-08-22 Hill Robert B Apparatus and method for identifying individuals through their retinal vasculature patterns
US4393366A (en) 1981-02-17 1983-07-12 Eye-D Development Ii Ltd. Rotating beam ocular identification apparatus and method
EP0382807B1 (de) * 1988-06-29 1994-12-07 G. Rodenstock Instrumente Gmbh Vorrichtung zur erzeugung eines bildes eines objekts
US5337043A (en) * 1989-04-27 1994-08-09 Security People, Inc. Access control system with mechanical keys which store data
DE4103298A1 (de) * 1991-02-04 1992-08-13 Heidelberg Engineering Optisch Vorrichtung zur abbildung eines objektes
US5359669A (en) * 1992-04-13 1994-10-25 Motorola, Inc. Remote retinal scan identifier
JP3315648B2 (ja) * 1998-07-17 2002-08-19 沖電気工業株式会社 アイリスコード生成装置およびアイリス認識システム
DE19901881A1 (de) * 1999-01-19 2000-07-27 Dcs Dialog Communication Syste Verfahren und System zur Fälschungssicherung bei biometrischer Personenerkennung
JP2001195594A (ja) * 1999-04-09 2001-07-19 Iritech Inc 虹彩同定システム及び虹彩認識によって人を同定する方法
AU2001275610A1 (en) 2000-07-19 2002-01-30 Creative Photonics N.V. An authentication device for forming an image of at least a partial area of an eye retina
US20050129286A1 (en) 2003-12-16 2005-06-16 Hekimian Christopher D. Technique using eye position and state of closure for increasing the effectiveness of iris recognition authentication systems

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030091215A1 (en) * 2000-05-16 2003-05-15 Eric Lauper Biometric identification and authentication method

Also Published As

Publication number Publication date
JP2009502382A (ja) 2009-01-29
JP2014028280A (ja) 2014-02-13
WO2007017207A1 (de) 2007-02-15
US8184867B2 (en) 2012-05-22
JP5909471B2 (ja) 2016-04-26
US20100098300A1 (en) 2010-04-22

Similar Documents

Publication Publication Date Title
WO2007017207A1 (de) Verfahren xmd system zur lebenderkennung bei retinaerkennung
EP1147494B1 (de) Verfahren und system zur fälschungssicherung bei biometrischer personenerkennung
DE60220494T2 (de) Verfahren zur Iriserkennung und System unter Verwendung desselben
EP3047424B1 (de) Vorrichtung, system und verfahren zum identifizieren einer person
CN102037488B (zh) 个人认证方法及用于其的个人认证装置
EP2977925A1 (de) Mobiles terminal zum erfassen biometrischer daten
EP3425560B1 (de) Vorrichtung und verfahren zur erfassung von biometrischen merkmalen eines gesichts einer person
WO2016155998A1 (de) Personenerkennungsvorrichtung
DE102006036864B4 (de) Verfahren und System zur biometrischen Identifikation oder Verifikation
WO2002041769A1 (de) Optische stimulation des menschlichen auges
DE102015007344B4 (de) Vorrichtung zur Bestimmung des Anteils unerlaubter Substanzen im Atem einer Person
EP3889807A1 (de) Authentifizierungssystem auf basis eines telekommunikationsgeräts mit einem hirnaktivitätssensor
DE102008031697B4 (de) Vorrichtung und Verfahren zur Objektidentifikation
DE102020109285A1 (de) Authentifizierungssystem auf Basis von Fremdbildern und Bekanntbildern und entsprechenden Hirnaktivitätssignalen
DE102020109284A1 (de) Authentifizierungssystem auf Basis von Hirnaktivitätssignalen
KR102567390B1 (ko) 동공 움직임을 이용한 위조 홍채 판별장치 및 그 방법
DE102020123927A1 (de) Verfahren zur Lebenderkennung bezüglich eines Fahrers eines Kraftfahrzeugs und Kraftfahrzeug
DE102019124127A1 (de) Vorrichtung und verfahren zur erfassung von biometrischen merkmalen eines gesichts einer person
EP1385116A1 (de) Verfahren zur Erteilung einer Zugangsberechtigung
DE102021117532A1 (de) Vorrichtung und Verfahren zur Erzeugung eines biometrischen Bildes eines Gesichts einer Person
DE102018104137A1 (de) Fertigungsmaschine zum Bearbeiten eines Kennzeichenschildes, Verfahren zum Steuern einer solchen Fertigungsmaschine sowie System zum Bearbeiten eines Kennzeichenschildes
DE102011119070A1 (de) Verfahren und Vorrichtung zur Zugangskontrolle und /oder Fehlverhaltenserkennung in sensiblen Bereichen
DE10144580A1 (de) Verfahren und Anordnung zur optischen Stimulation des menschlichen Auges
Booker Retinal scanners eye-dentify inmates.

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20080212

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU LV MC NL PL PT RO SE SI SK TR

17Q First examination report despatched

Effective date: 20091202

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

DAX Request for extension of the european patent (deleted)
APBK Appeal reference recorded

Free format text: ORIGINAL CODE: EPIDOSNREFNE

APBN Date of receipt of notice of appeal recorded

Free format text: ORIGINAL CODE: EPIDOSNNOA2E

APBR Date of receipt of statement of grounds of appeal recorded

Free format text: ORIGINAL CODE: EPIDOSNNOA3E

APAF Appeal reference modified

Free format text: ORIGINAL CODE: EPIDOSCREFNE

APAF Appeal reference modified

Free format text: ORIGINAL CODE: EPIDOSCREFNE

APAF Appeal reference modified

Free format text: ORIGINAL CODE: EPIDOSCREFNE

APAF Appeal reference modified

Free format text: ORIGINAL CODE: EPIDOSCREFNE

APBT Appeal procedure closed

Free format text: ORIGINAL CODE: EPIDOSNNOA9E

REG Reference to a national code

Ref country code: DE

Ref legal event code: R003

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN REFUSED

18R Application refused

Effective date: 20211011