DE19636867C1 - Video signal processing apparatus for noise signal removal - Google Patents

Video signal processing apparatus for noise signal removal

Info

Publication number
DE19636867C1
DE19636867C1 DE19636867A DE19636867A DE19636867C1 DE 19636867 C1 DE19636867 C1 DE 19636867C1 DE 19636867 A DE19636867 A DE 19636867A DE 19636867 A DE19636867 A DE 19636867A DE 19636867 C1 DE19636867 C1 DE 19636867C1
Authority
DE
Germany
Prior art keywords
signal
image
video
arrangement
current image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE19636867A
Other languages
German (de)
Inventor
Gerhard Dipl Ing Wischermann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DFT Digital Film Technology Holding GmbH
Original Assignee
Philips Patentverwaltung GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Philips Patentverwaltung GmbH filed Critical Philips Patentverwaltung GmbH
Priority to DE19636867A priority Critical patent/DE19636867C1/en
Application granted granted Critical
Publication of DE19636867C1 publication Critical patent/DE19636867C1/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/253Picture signal generating by scanning motion picture films or slide opaques, e.g. for telecine
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/11Scanning of colour motion picture films, e.g. for telecine

Abstract

The video signal processing apparatus includes an adaptive median filtering arrangement. The device compares the current image with the preceding and subsequent images to generate a movement signal (Wmot) for detection of the moving image regions. The movement signal (Wmot) is masked using a masking signal (WD) which defines the start and end of a moving object in the current image. The classification of the white defect signals and black defect signals is performed in separate signal paths.

Description

Die Erfindung betrifft ein Gerät zur Verarbeitung von Videosignalen mit einer Anordnung zur Störsignalbefreiung mittels adaptiver Medianfilterung, die dazu vorgesehen ist, in als gestört und unbewegt klassifizierten Bildbereichen eine Fehlerverdeckung vorzunehmen, wobei vorgesehen ist, durch Vergleich von Bildinhalten mindestens eines dem aktuellen Bild vorangehenden Bildes und mindestens eines, dem aktuellen Bild folgenden Bildes ein Bewegungssignal zur Kennzeichnung von bewegten Bildbereichen zu erzeugen. Die Erfindung betrifft ferner auch Anordnungen zur Störsignalbefreiung als solche als auch Verfahren zur Störsignalbefreiung.The invention relates to a device for processing video signals with a Arrangement for interference signal elimination by means of adaptive median filtering is provided, in image areas classified as disturbed and still Error concealment is provided, by comparison of Image content of at least one image preceding the current image and at least one motion signal following the current image To generate marking of moving image areas. The invention relates also arrangements for interference signal release as such and methods for Noise signal exemption.

Bei der Verarbeitung von Videosignalen, insbesondere Nachbearbeitung von Film­ material - sei es beispielsweise in einem Filmabtaster oder in speziellen Geräten zur Unterdrückung von Störsignalen (noise reducer) - treten unter anderem örtlich be­ grenzte Störungen auf, die auf jeweils einzelne Videobilder beschränkt sind und somit hinsichtlich des Ortes ihres Auftretens eine statistische Verteilung aufweisen. Beispielsweise enthalten die Videobilder, die durch Abtastung eines Films erhalten werden, aufgrund von auf den Filmbildern haftenden Staubpartikeln oder in der Filmoberfläche liegenden Kratzern bei Abtastung von Positivfilmmaterial schwarze Punkte, bzw. Streifen und bei Abtastung von Negativfilmmaterial bei anschließender Farbumkehr weiße Punkte bzw. Streifen. Da Staubpartikel, Schimmelflecken, etc. von Filmbild zu Filmbild an unterschiedlichen Orten auftreten, können durch Ver­ gleich mehrerer aufeinanderfolgender Bilder diese Störstellen mittels eines Median­ filters ausgefiltert werden. Hierbei ist es jedoch erforderlich, eine zufällig auftre­ tende Störstelle von einer unechten Störstelle, die aufgrund der auf einem Film aufgezeichneten Bewegung eines Objekts, sei es durch eine Bewegung des Objekts selbst oder durch eine Bewegung der aufnehmenden Kamera zu unterscheiden, damit solche Objekte nicht fälschlicherweise ebenfalls von dem Medianfilter ausgefiltert werden.When processing video signals, especially post-processing of film material - be it, for example, in a film scanner or in special devices Suppression of interference signals (noise reducer) - occur locally, among other things limited interference that is limited to individual video images and thus have a statistical distribution with regard to the location of their occurrence. For example, the video contains images obtained by scanning a film due to dust particles adhering to the film images or in the Scratches lying on the film surface when scanning positive film material black Dots or stripes and when scanning negative film material with subsequent Color reversal of white dots or stripes. Since dust particles, mold spots, etc. occur from film picture to film picture in different places, can by Ver a number of consecutive images of these defects using a median filters can be filtered out. Here, however, it is necessary to find one at random flaw from a fake flaw due to the on a film recorded movement of an object, be it by movement of the object distinguish themselves or by moving the recording camera so that  such objects are also not incorrectly filtered out by the median filter will.

Hierzu ist aus DE 43 43 095 A1 ein Verfahren zur Störsignalbefreiung von Video­ signalen mittels adaptiver Medianfilterung bekannt, bei dem der Bildinhalt in jeweils unbewegte, bewegte, ungestörte und gestörte Bildbereiche klassifiziert wird, und anschließend nur in den gestörten und unbewegten Bildbereichen eine Fehlerver­ deckung mit Hilfe einer zeitlichen Medianfilterung durchgeführt wird. Hierbei wer­ den die gleichzeitig vorliegenden Videosignale mindestens dreier zeitlich aufeinan­ derfolgender Bilder miteinander verglichen, und ein Steuersignal abgeleitet, welches zur Umschaltung zwischen den mediangefilterten Videosignal und den ungefilterten Videosignalen bestimmt ist. Die Bildung dieses Steuersignals erfolgt durch logische Verknüpfung von Hilfssignalen in einer Arithmetisch-Logischen Einheit.For this purpose, DE 43 43 095 A1 describes a method for removing interference signals from video signals known by means of adaptive median filtering, in which the image content in each motionless, moving, undisturbed and disturbed image areas is classified, and then an error detection only in the disturbed and still image areas coverage is carried out with the help of a temporal median filtering. Here who which the simultaneously available video signals have at least three in time the following images are compared with one another, and a control signal is derived, which for switching between the media-filtered video signal and the unfiltered Video signals is determined. This control signal is generated by logic Linking auxiliary signals in an arithmetic-logic unit.

Ein erstes Hilfssignal (Kontrastsignal) dient zur Erkennung von auftretenden starken Änderungen des Videobildes. Ein zweites Hilfssignal wird erzeugt wenn eine in den vorangegangenen und folgenden jeweils miteinander verglichenen Videobildern aufge­ tretene Änderung des Videobildes nicht an der gleichen Stelle aufgetreten ist, und somit ein Indiz für eine Störung darstellt. Ein drittes Hilfsignal (Bewegungssignal) wird dann erzeugt wenn eine auftretende starke Änderung des Videobildes auf allen miteinander verglichenen Videobilder an einer jeweils gegenüber dem vorangegange­ nem Videobild verschobenen Position auftritt. Bei der logischen Verknüpfung dieser Hilfssignale wird verhindert, daß für die Dauer des Bewegungssignals die Erzeu­ gung des Steuersignals zur Umschaltung auf das mediangefilterte Videosignal unterdrückt wird.A first auxiliary signal (contrast signal) is used to identify strong ones that occur Changes to the video image. A second auxiliary signal is generated when one in the preceding and following respectively compared video images occurred change of the video image did not occur in the same place, and is therefore an indication of a malfunction. A third auxiliary signal (motion signal) is generated when there is a major change in the video image on all mutually compared video images on one each compared to the previous one nem video position shifted occurs. When logically linking them Auxiliary signals are prevented from generating for the duration of the motion signal control signal to switch to the media-filtered video signal is suppressed.

In der Vergangenheit hat sich bei der Bearbeitung von Videobilder mittels der aus DE 43 43 095 A1 bekannten Anordnung zur Durchführung des Verfahrens jedoch gezeigt, daß einige singulär auftretende Bildstörungen nicht unterdrückt wurden. In the past, when processing video images using the DE 43 43 095 A1 known arrangement for performing the method, however showed that some singular image disturbances were not suppressed.  

Aus EP 0 488 498 A1 ist eine Anordnung zur Bewegungsdetektion bekannt, deren Ausgangssignal zur adaptiven Verarbeitung von Fernsehsignalen, beispielsweise der Ansteuerung eines Kammfilters zur Trennung von Chrominanz- und Luminanzkom­ ponenten, vorgesehen ist. Die Signaldifferenzen zwischen einem aktuellen Bild und einem um einen Bildrahmen vorangegangenen Bild und dem aktuellen und einem um zwei Bilder vorangegangenen Bild werden mittels zweier Kammfilter erhalten. Die in geeigneter Weise aufbereiteten Ausgangssignale der beiden Kammfilter werden schließlich zu einem einzigen Steuersignal verknüpft. Nach einem Vergleich des ab­ soluten Wertes des Steuersignals und einem Schwellwertvergleich ist dieses Steuer­ signal schließlich einem Signalspreizer zugeführt. Zur Steuerung des Übergangs zwischen bewegten und unbewegten Bildbereichen wird vorgeschlagen, das Aus­ gangssignal des Signalspreizers einem weichumschaltenden Umschalter zuzuführen, der die ortsfrequenzverarbeiteten Luminanzsignale mit zeitlich verarbeiteten Lumi­ nanzsignalen mischt.An arrangement for motion detection is known from EP 0 488 498 A1 Output signal for adaptive processing of television signals, for example the Control of a comb filter to separate chrominance and luminance comm components, is provided. The signal differences between a current picture and one previous picture frame and one current picture Two images preceding the image are obtained using two comb filters. The appropriately processed output signals of the two comb filters finally linked into a single control signal. After comparing the solute value of the control signal and a threshold value comparison is this control signal finally fed to a signal spreader. To control the transition between moving and still picture areas it is proposed to stop feed signal of the signal spreader to a soft-switching switch, of the spatial frequency processed luminance signals with time processed Lumi mixes.

Aufgabe der vorliegenden Erfindung ist es, bei einer Anordnung zur Störsignal­ befreiung der eingangs genannten Art, die Unterdrückung von singulären Bild­ störungen weiter zu verbessern.The object of the present invention is to provide an interference signal arrangement liberation of the kind mentioned at the beginning, the suppression of singular image to further improve disorders.

Diese Aufgabe wird bei einer gattungsgemäßen Anordnung zur Störsignalbefreiung dadurch gelöst, daß die Anordnung zur Störsignalbefreiung dazu vorgesehen ist, das Bewegungssignal mit einem Maskierungssignal zu maskieren, wobei das Maskierungssignal den Beginn und das Ende eines bewegten Objekts im aktuellen Bild angibt. Hierdurch wird erreicht, daß die Unterdrückung der Fehlerverdeckung eines als bewegt klassifizierten Bildbereichs im wesentlichen auf den tatsächlichen Umriß des bewegten Bildbereichs beschränkt bleibt. This task is in a generic arrangement for interference signal release solved in that the arrangement for interference signal release is provided for that To mask motion signal with a masking signal, the Mask signal the start and end of a moving object in the current one Image indicates. This ensures that the error concealment is suppressed an image area classified as moving essentially to the actual one Outline of the moving image area remains limited.  

Durch Begrenzung des bei der Störsignalbefreiung ausgegrenzten Bereichs, in wel­ chem eine Bewegung detektiert wird, auf den Bereich den das bewegte Objekt im aktuellen Bild einnimmt, wird verhindert, daß in der näheren Umgebung von ins­ besondere besonders schnell bewegten Objekten singulär auftretende Bildfehler fälschlicherweise nicht ausgeblendet werden.By limiting the area that is excluded from the interference signal exemption, in which chem a movement is detected on the area that the moving object in the takes the current picture, is prevented that in the vicinity of ins special, particularly rapidly moving objects, singular image errors are incorrectly not hidden.

Es hat sich ferner gezeigt, daß sich mit einer Verarbeitung der zur Detektion ver­ wendeten Hilfssignale in getrennten Signalzweigen zur separaten Auswertung von schwarzen Filmstörungen und weißen Filmstörungen die Anzahl von Fehlentschei­ dungen weiter reduzieren ließ.It has also been shown that processing of the ver used auxiliary signals in separate signal branches for separate evaluation of black film interference and white film interference the number of wrong decisions reduced further.

In einer Ausgestaltung der Erfindung ist vorgesehen zur Fehlerverdeckung eine Überblendung zwischen aktuellen Bild und median-gefilterten Bild vorzunehmen. Hierzu wird beispielsweise ein analoges, bzw. mindestens mehrwertiges Steuersignal zur Ansteuerung einer Videomischstufe erzeugt, deren einem Videosignaleingang das Videosignal des aktuellen Bildes und deren anderem Videosignaleingang das Videosignal des median-gefilterten Bildes zugeführt ist. Hierdurch wird es ermög­ licht, im eng abgegrenzten Bereich einer singulären Bildstörung anstelle einer harten Umschaltung eine weiche Überblendung zwischen den Videosignalen vorzunehmen. Dies hat den Vorteil, daß die Ersetzung von gestörten Bildbereichen durch Ersatz­ bildbereiche, die den median-gefilterte Bilder des aktuellen Bildes entnommen wer­ den, weit weniger erkennbar wird.In one embodiment of the invention, a is provided for concealing errors Crossfade between current image and median-filtered image. For this purpose, for example, an analog or at least multi-value control signal is used generated to control a video mixer, the one video signal input the video signal of the current picture and their other video signal input Video signal of the median-filtered image is fed. This makes it possible light, in the narrow range of a singular image disturbance instead of a hard one  Switching to make a soft crossfade between the video signals. This has the advantage that the replacement of disturbed image areas by replacement image areas that are taken from the median-filtered images of the current image which becomes far less recognizable.

Durch Signalformung, des zum Überblenden vorgesehenen Steuersignals, kann durch Verstärkung und Begrenzung dieses Steuersignals eine steilerer Signalanstieg und Signalabfall erreicht werden. Dies hat den Vorteil, daß das Steuersignal auch bei geringerem Kontrast des Störsignals einen ausreichend großen Signalhub aufweist.By signal shaping, the control signal provided for cross-fading, can a steeper signal increase by amplifying and limiting this control signal and signal drop can be achieved. This has the advantage that the control signal too with a lower contrast of the interference signal, a sufficiently large signal swing having.

Die Erfindung wird nun anhand von in den Figuren dargestellten Ausführungsbei­ spielen eingehend beschrieben und erläutert.The invention will now be described with reference to embodiments shown in the figures play described and explained in detail.

Es zeigen:Show it:

Fig. 1 Blockschaltbild eines Gerätes zur Signalverarbeitung von Videosignalen mit einer Anordnung zur Störsignalbefreiung von Videosignalen, Fig. 1 block diagram of an apparatus for signal processing of video signals with an arrangement for interference signals from video signals,

Fig. 2 Blockschaltbild zur Darstellung der generellen Arbeitsweise einer Anordnung zur Störsignalbefreiung von Videosignalen mittels eines adaptiven Medianfilters, Fig. 2 Block diagram illustrating the general operation of an arrangement for interference signals from video signals by means of an adaptive median filter,

Fig. 3 Detailliertes Blockschaltbild einer Arithmetisch-Logischen Einheit zur Erzeu­ gung eines Steuersignals gemäß der Erfindung zur Auswahl zwischen aktuellen Bild und median-gefilterten Bild, Fig. 3 detailed block diagram of an arithmetic logic unit for the generation supply a control signal according to the invention for selecting between the current image and median-filtered image,

Fig. 4 Zeitdiagramm mit Eingangs- und Ausgangssignalen und internen Hilfs­ signalen der Arithmetisch-Logischen Einheit nach Fig. 3, Fig. 4 timing diagram showing input and output signals and internal signals of the auxiliary arithmetic logic unit of FIG. 3,

Fig. 5 Detailliertes Blockschaltbild einer Arithmetisch-Logischen Einheit zur Erzeugung von analogen bzw. mehrwertigen Steuersignalen zur Störsignal­ ausblendung, Fig. 5 detailed block diagram of an arithmetic logic unit for generating analog or polyhydric control signals for noise suppression,

Fig. 6 Zeitdiagramme mit Eingangs- und Ausgangssignalen und internen Hilfs­ signalen der Arithmetisch-Logischen Einheit nach Fig. 5 Fig. 6 are timing charts with input and output signals and internal signals of the auxiliary arithmetic logic unit of FIG. 5

Fig. 1 zeigt ein Blockschaltbild eines Filmabtasters 1, bei dem das in einem Abtaster 2 gewonnene analoge Videosignal eines abgetasteten Film in einem Analog- Digital Umsetzer 3 in digitale Luminanz und Chrominanzsignale umcodiert wird. In einer Anordnung zur Störsignalbefreiung 4 sind verschiedene Detektoren 5, 6 dazu vorgesehen, Fehler im abgetasteten Videosignal zu erkennen und durch Störstellen­ signale K₁, K₂ zu kennzeichnen. Bei den Detektoren handelt es sich beispielsweise um einen Detektor zur Erkennung von Schmutzpartikeln (dirt detector) 5 und einen Detector zur Erkennung von Kratzern (scratch detector) 6. Durch die Störstellen­ signale K₁, K₂ wird ein Medianfilter 7 angesteuert, welches Bildbereiche, die als Fehler eingestuft wurden durch deren mediangefilterte Ersatzwerte ersetzt. Fig. 1 shows a block diagram of a film scanner 1, wherein said obtained in a pickup 2 analog video signal is transcoded of a scanned film in an analog-digital converter 3 into digital luminance and chrominance signals. In an arrangement for interference signal release 4 , various detectors 5 , 6 are provided to detect errors in the sampled video signal and to identify signals K 1, K 2 by interfering points. The detectors are, for example, a detector for detecting dirt particles (dirt detector) 5 and a detector for detecting scratches (scratch detector) 6 . Through the impurity signals K₁, K₂, a median filter 7 is driven, which image areas, which were classified as errors, are replaced by their median-filtered substitute values.

Die erfindungsgemäße Anordnung zur Störsignalbefreiung ist jedoch nicht nur auf Filmabtaster beschränkt, sie kann in jeder Anordnung, die zur Störsignalbefreiung von Videosignalen verwendet wird sinnvoll eingesetzt werden, also auch beispiels­ weise in Zusammenhang mit der Wiedergabe von gespeicherten Videosignalen und auch all eigenständiges Gerät, in einem sogenannten "Noice reducer". Auch die Art des Quellensignal, sei es analog oder digital spielt für das Wesen der Erfindung keine Rolle, da Signalumwandlungen jeder Zeit problemlos möglich sind.However, the arrangement according to the invention for interference signal elimination is not only based on Film scanner limited, it can be used in any arrangement, which is used for noise suppression of video signals is used sensibly, so also for example wise in connection with the playback of stored video signals and also all independent device, in a so-called "Noice reducer". Art the source signal, be it analog or digital, plays for the essence of the invention not matter, since signal conversions are possible at any time without any problems.

Fig. 2 zeigt das bereits aus DE 43 43 095 A1 bekannte Blockschaltbild zur Stör­ signalbefreiung von Videosignalen, bei dem über eine Eingangsklemme 11 ein digitales Videosignal (Luminanz- und/oder Chrominanzsignal), zwei in Reihe liegenden Bildspeichern 12, 13 nacheinander zugeführt wird. Je nachdem ob Voll- oder Teilbilder bearbeitet werden soll, müssen die Bildspeicher 12, 13 auch als Voll- oder Halbbildspeicher ausgebildet sein. Mittels der beiden Bildspeicher 12, 13 sind die Videosignale x, y, z von jeweils drei aufeinander folgenden Bilder N-1, N und N+1 gleichzeitig verfügbar. Die Videosignale x, y, z sind einerseits den nach den Videosignalen gleichbezeichneten Eingängen x, y, z einer Arithmetisch-Logi­ schen Einheit 10 zur Erzeugung eines Störstellensignals K und andererseits den Eingängen X, Y, Z eines Medianfilters 14 über jeweils ein erstes, zweites und drittes Laufzeitglied 15, 16, 17 zugeführt. Fig. 2 shows the block circuit diagram already known from DE 43 43 095 A1 for the elimination of interfering signals from video signals, in which a digital video signal (luminance and / or chrominance signal) is supplied to two image memories 12 , 13 in series via an input terminal 11 . Depending on whether full or partial images are to be processed, the image memories 12 , 13 must also be designed as full or field memories. The video signals x, y, z of three successive images N-1, N and N + 1 are simultaneously available by means of the two image memories 12 , 13 . The video signals x, y, z are, on the one hand, the inputs x, y, z of an arithmetic logic unit 10 for generating an impurity signal K, which are given the same name according to the video signals, and on the other hand, the inputs X, Y, Z of a median filter 14 , each via a first, second and third delay element 15 , 16 , 17 supplied.

Wird das "mittlere" Bild N als das aktuelle Bild N interpretiert, so steht zeitgleich zum Videosignal y des aktuellen Bildes N am Eingang y der Arithmetisch-Logischen Einheit 10, am Eingang z der Arithmetisch-Logischen Einheit 10 das Videosignal z des dem aktuellen Bild N vorangegangenen Bildes N-1 und am Eingang x von Arithmetisch-Logischer Einheit 10 das Videosignal x des dem aktuellen Bild N folgenden Bildes N+1 an. Die Bearbeitungszeit, die die Arithmetisch-Logische Einheit 10 zur Erzeugung des Störstellensignal K benötigt, wird durch die Laufzeit­ glieder 15, 16, 17 ausgeglichen, so daß auf diese Weise Synchronität zwischen Ausgangssignal Y des zweiten Laufzeitgliedes 16 bzw. Ausgangssignal Y* des Median-Filters 14 und dem Störstellensignal K der Arithmetisch-Logischen Einheit 10 gewährleistet ist.If the "middle" picture N is interpreted as the current picture N, then at the same time as the video signal y of the current picture N, the video signal z of the current picture is at the input y of the arithmetic logic unit 10 and at the input z of the arithmetic logic unit 10 N previous picture N-1 and at the input x of arithmetic-logic unit 10 the video signal x of the picture N + 1 following the current picture N on. The processing time required by the arithmetic-logic unit 10 to generate the fault signal K is compensated by the delay elements 15 , 16 , 17 , so that in this way synchronicity between the output signal Y of the second delay element 16 and the output signal Y * of the median Filters 14 and the fault signal K of the arithmetic-logic unit 10 is guaranteed.

Der Ausgang Y* des Medianfilters 14 ist mit einen ersten Eingang eines Um­ schalters 18 und der Ausgang des zweiten Laufzeitgliedes 16 mit dem zweiten Eingang des Umschalters 18 verbunden. Der Umschalter 18 wird mit Hilfe des in der Arithmetisch-Logischen Einheit 10 erzeugten und an deren Ausgang abnehm­ baren Störstellensignals K umgeschaltet. In der Arithmetisch-Logischen Einheit 10 wird eine Klassifizierung des Bildinhaltes aus den drei gleichzeitig vorliegenden Bildern N+1, N, N-1 in bewegte, unbewegte, gestörte und ungestörte Bildbereiche vorgenommen und nur für die gestörten und unbewegten Bildbereiche ein Störstel­ lensignal K erzeugt. Mittels des Störstellensignals K wird der Umschalter 18 so geschaltet, daß nur in den gestörten und unbewegten Bereichen des Bildes N das mediangefilterte Videosignal Y* auf den Ausgang 19 gelangt, während für alle anderen Bildbereiche das Signal Y des Bildes N direkt zum Ausgang 19 geführt wird.The output Y * of the median filter 14 is connected to a first input of a switch 18 and the output of the second delay element 16 to the second input of the switch 18 . The changeover switch 18 is switched with the aid of the arithmetic-logic unit 10 which is generated and can be removed at the output thereof. The arithmetic-logic unit 10 classifies the image content from the three simultaneously present images N + 1, N, N-1 into moving, unmoving, disturbed and undisturbed image areas and generates an interference signal K only for the disturbed and unmoving image areas . By means of the interference signal K, the changeover switch 18 is switched such that the media-filtered video signal Y * reaches the output 19 only in the disturbed and unmoved areas of the picture N, while the signal Y of the picture N is fed directly to the output 19 for all other picture areas .

Fig. 3 zeigt eine Ausführungsform der Arithmetisch-Logischen Einheit 10 gemäß der Erfindung mit drei Videosignaleingängen x, y, z, zwei Steuersignaleingängen b, w und einem Schaltsignalausgang K. Im folgenden wird für das am ersten Video­ signaleingang x anliegenden Videosignal ebenfalls die Bezeichnung x, für das am zweiten Videosignaleingang y anliegende Videosignal ebenfalls die Bezeichnung y und für das am dritten Videosignaleingang z anliegende Videosignal ebenso die Bezeichnung z verwendet. Mittels der an den Steuersignaleingängen b und w der Arithmetisch-Logischen Einheit 10 anlegbaren Steuersignale kann die Arithmetisch- Logische Einheit 10 so gesteuert werden, daß sie entweder nur weiße singuläre Bildstörungen (z. B. Staubpartikel bei Abtastung eines als Negativ vorliegenden Filmmaterials) oder nur schwarze singuläre Bildstörungen (z. B. Staubpartikel bei Abtastung eines als Postiv vorliegenden Filmmaterials) oder sowohl weiße als auch schwarze singuläre Bildstörungen detektiert. Weiße und schwarze singuläre Bild­ störungen treten beispielsweise dann gleichzeitig auf, wenn ein mit Staubpartikeln behaftetes, als Negativ vorliegendes Filmmaterial mitsamt den Staubpartikeln umkopiert wird, wodurch die Staubpartikel in dem sich dadurch ergebenden positiven Filmmaterial als weiße Störstellen bei der Abtastung wiedergegeben werden, während die nunmehr auf dem positiven Filmmaterial anhaftenden Staubpartikel schwarz wiedergegeben werden. Fig. 3 shows an embodiment of the arithmetic-logic unit 10 according to the invention with three video signal inputs x, y, z, two control signal inputs b, w and a switching signal output K. In the following, the designation x is also used for the video signal present at the first video input x , also uses the designation y for the video signal present at the second video signal input y and also uses the designation z for the video signal present at the third video signal input z. By means of the control signals which can be applied to the control signal inputs b and w of the arithmetic logic unit 10 , the arithmetic logic unit 10 can be controlled in such a way that it either only white singular image disturbances (e.g. dust particles when scanning a film material present as a negative) or only black singular image disturbances (e.g. dust particles when scanning a film material present as positive) or both white and black singular image disturbances are detected. White and black singular image disturbances occur, for example, at the same time when a film material containing negative dust particles, which is present as a negative, is copied together with the dust particles, as a result of which the dust particles in the resulting positive film material are reproduced as white defects during the scanning, while they are now dust particles adhering to the positive film material are reproduced in black.

Fig. 4 zeigt als Diagramm den zeitlichen Verlauf von Ein- und Ausgangssignalen, sowie von internen Hilfssignalen der Arithmetisch-Logischen Einheit 10 zur Erläu­ terung der Funktion der Arithmetisch-Logischen Einheit 10. Im linken Teil des Dia­ gramms der Fig. 4 ist das Videosignal A eines sich langsam bewegenden Objekts, z. B. ein langsam vorbeifahrendes Fahrzeuges dargestellt. Da die Bewegung des Objekts von Filmbild zu Filmbild kleiner ist, als die Größe des Objekts, überdecken sich die Videosignale Ax, Ay, Az der jeweils drei aufeinanderfolgenden Bilder N-1, N, N+1 sehr stark. Im mittleren Teil des Diagramms sind die Videosignale Bx, By, Bz eines sich schnell bewegenden Objekts dargestellt, bei dem sich die einzelnen Videosignale Bx, By, Bz von Bild zu Bild nicht mehr überdecken. Bei nach rechts verlaufender Zeitachse des Diagramms bewegen sich beide Objekte im abgetasteten Film, übliche Abtastung des Bildes von links nach rechts vorausgesetzt, somit von rechts nach links, da die Videosignale Ay, By des bewegten Objekts im aktuellen Bild N gegenüber den Videosignal Az, Bz des bewegten Objekts in dem dem aktuel­ len Bild vorangegangen Bild N-1, bezogen auf den jeweiligen Bildbeginn zeitlich früher einsetzen. Im rechten Teil des Diagramms hingegen ist das Videosignal C einer singulären Bildstörung dargestellt, die nur im Videosignal y des aktuellen Bildes auftritt. Der Übersichtlichkeit wegen sind im Diagramm der Fig. 4 die bei der Signalaufbereitung entstehenden Verzögerungszeiten die durch diverse Laufzeit­ glieder ausgeglichen werden bereits berücksichtigt, so als würden überhaupt keine Verzögerungszeiten auftreten. Fig. 4 shows a diagram of the time course of input and output signals and internal auxiliary signals of the arithmetic-logic unit 10 to explain the function of the arithmetic-logic unit 10th In the left part of the diagram of FIG. 4, the video signal A of a slowly moving object, e.g. B. a slowly passing vehicle is shown. Since the movement of the object from film frame to film frame is smaller than the size of the object, the video signals A x , A y , A z of the three successive frames N-1, N, N + 1 overlap very strongly. In the middle part of the diagram, the video signals B x , B y , B z of a rapidly moving object are shown, in which the individual video signals B x , B y , B z no longer overlap from picture to picture. If the time axis of the diagram runs to the right, both objects move in the scanned film, provided the image is scanned from left to right, i.e. from right to left, since the video signals A y , B y of the moving object in the current image N compared to the video signal A z , B z of the moving object in the image N-1 preceding the current image, based on the respective image start earlier in time. In the right part of the diagram, however, the video signal C of a singular image disturbance is shown, which occurs only in the video signal y of the current image. For the sake of clarity, the delay times which arise in the signal processing and which are compensated by various delay elements are already taken into account in the diagram of FIG. 4, as if no delay times were to occur at all.

Die Arithmetisch-Logische Einheit 10 weist im Ausführungsbeispiel eine symmetri­ schen Struktur mit einem ersten Signalzweig zur Detektion von weißen singulären Bildstörungen und einem zweiten Signalzweig zur Detektion von schwarzen singu­ lären Bildstörungen auf. Die Signalzweige unterscheiden sich nur durch die entgegengesetzte Polarität der zur Detektion benutzten Schwellwerte TH, bzw. -TH. Im folgenden wird zunächst der Signalzweig zur Erkennung von weißen singulären Bildstörungen beschrieben.In the exemplary embodiment, the arithmetic-logic unit 10 has a symmetrical structure with a first signal branch for the detection of white singular image interference and a second signal branch for the detection of black singular image interference. The signal branches differ only in the opposite polarity of the threshold values TH or TH used for the detection. The signal branch for the detection of white singular image disturbances is first described below.

Erster Eingang x und zweiter Eingang y der Arithmetisch-Logischen Einheit 10 sind mit einem ersten Differenzbildner 101 verbunden, dessen Ausgangssignal y-x der Differenz zwischen dem Videosignal y des aktuellen Bild N und dem Videosignal x, des dem aktuellen Bild folgenden Bildes N+1 entspricht. Ebenso ist der zweite Eingang y und der dritte Eingang z mit einem zweiten Differenzbildner 102 verbunden, dessen Ausgangssignal y-z folglich der Differenz zwischen den Video­ signalen y des aktuellen Bildes N und dem Videosignal z des dem aktuellen Bildes vorangehenden Bildes N-1 entspricht. Ein dritter Differenzbildner 103 welcher mit dem ersten Eingang x und dem dritten Eingang z verbunden ist, erzeugt das Differenzsignal x-z, welches der Differenz zwischen dem Videosignal x des dem aktuellen Bild folgenden Bildes N+1 und dem Videosignal z des dem aktuellen Bildes vorangehenden Bildes N-1 entspricht. Das Ausgangssignal y-x des ersten Differenzbildners 101 ist einem ersten Komparator 104, das Ausgangssignal y-z des zweiten Differenzbildners 102 einem zweiten Komparator 105 zugeführt. Erster und zweiter Komparator 104 bzw. 105 vergleichen ihr Eingangssignal mit dem positiven Wert einer Schaltschwelle TH. Liegen die auszuwertenden Videosignale x, y, z als Luminanzsignale vor, so wird durch den Schwellwert TH der Kontrastunterschied vorgegeben, ab dem eine Helligkeitsänderung zwischen den betrachteten Bildern als mögliche Störung eingestuft wird. Eine Überschreitung dieses Schwellwertes TH zeigt somit an, daß sich der Bildinhalt von zwei aufeinanderfolgenden Bilder im betrachteten Bildbereich sehr stark, und zwar aufgrund des positiven Schwellwertes TH durch ein Bildobjekt mit hohen Helligkeitsanteil geändert hat. Falls das abge­ tastete Filmmaterial als Negativ vorlag, ist dies ein Hinweis auf ein eventuelles Staub- bzw. Schmutzpartikel, dessen dunkler Fleck durch Konvertierung ins Positive als heller Fleck auftreten würde.The first input x and the second input y of the arithmetic-logic unit 10 are connected to a first difference generator 101 , the output signal yx of which corresponds to the difference between the video signal y of the current picture N and the video signal x of the picture N + 1 following the current picture. Likewise, the second input y and the third input z are connected to a second difference generator 102 , whose output signal yz consequently corresponds to the difference between the video signals y of the current picture N and the video signal z of the picture N-1 preceding the current picture. A third difference generator 103, which is connected to the first input x and the third input z, generates the difference signal xz, which is the difference between the video signal x of the image N + 1 following the current image and the video signal z of the image N preceding the current image Corresponds to -1. The output signal yx of the first difference former 101 is fed to a first comparator 104 , the output signal yz of the second difference former 102 to a second comparator 105 . First and second comparators 104 and 105 compare their input signal with the positive value of a switching threshold TH. If the video signals x, y, z to be evaluated are in the form of luminance signals, the threshold value TH specifies the contrast difference from which a change in brightness between the images viewed is classified as a possible disturbance. Exceeding this threshold value TH thus indicates that the image content of two successive images in the viewed image area has changed very significantly, specifically because of the positive threshold value TH due to an image object with a high proportion of brightness. If the scanned film material was present as a negative, this is an indication of a possible dust or dirt particle whose dark spot would appear as a light spot when converted to positive.

Durch logische UND-Verknüpfung der Ausgangssignale von ersten und zweiten Komparator 104, 105 in einem ersten UND-Gatter 106 wird ein Kontrastsignal WD (white dirt) erhalten, welches über ein erstes Laufzeitglied 107 einem ersten Eingang eines zweiten UND-Gatters 108 zugeführt ist. Das Kontrastsignal WD signalisiert, daß im aktuellen Bild möglicherweise eine singuläre Bildstörung vorliegen könnte, denn wie aus Fig. 4 ersichtlich wird das Kontrastsignal WD nicht nur bei der singulären Bildstörung C, sondern auch für die bewegten Objekte A und B erzeugt. A logical AND operation of the output signals from the first and second comparators 104 , 105 in a first AND gate 106 results in a contrast signal W D (white dirt) which is fed to a first input of a second AND gate 108 via a first delay element 107 . The contrast signal W D indicates that the current frame could possibly present a singular image disturbance, because as shown in FIG. 4 can be seen the contrast signal W D is generated not only in the singular image disturbance C, but also for the moving objects A and B.

Besonders schwierig ist es sehr schnell bewegte kleine Objekte ( z. B. Regen) von singulären Bildstörungen zu unterscheiden, da beide eine ähnliche statistische Verteilung aufweisen. Eine befriedigende Bewegungsdetektion sollte daher auch eine Bewegungsverfolgung mit einschließen, mit der auch schnell bewegte kleine Objekte von singulären Bildstörungen sicher unterschieden werden können. Zur Detektion eines bewegten Objekts wird das Ausgangssignal x-z des dritten Differenzbildners 103 einem Betragbildner 110 zugeführt welcher den Betrag x-z der Videosignale x, z zwischen vorangehenden und nachfolgenden Bild bildet. In einem dritten Komparator 111 wird dieser Betrag mit einem ebenfalls einstellbaren Schwellwert THmot verglichen und erzeugt bei Überschreiten des Schwellwertes THmot ein Bewegungssignal MOT. Der Schellwert THmot ist so einzustellen, daß das dem Eingangssignal überlagerte Rauschen gerade noch nicht zu einer Schwellenüber­ schreitung führt. Da in die Signaldifferenz x-z das Videosignal y des aktuellen Bildes N nicht mit eingeht, erzeugen singuläre Bildstörungen im aktuellen Bild kein Bewegungssignal MOT.It is particularly difficult to distinguish very fast moving small objects (e.g. rain) from singular image disturbances, since both have a similar statistical distribution. A satisfactory motion detection should therefore also include motion tracking, with which even fast-moving small objects can be reliably distinguished from singular image disturbances. To detect a moving object, the output signal xz of the third difference generator 103 is fed to a magnifier 110, which forms the magnitude xz of the video signals x, z between the preceding and the subsequent image. In a third comparator 111 , this amount is compared with an also adjustable threshold value TH mot and generates a motion signal MOT when the threshold value TH mot is exceeded. The threshold value TH mot is to be set such that the noise superimposed on the input signal does not just lead to a threshold being exceeded. Since the video signal y of the current picture N is not included in the signal difference xz, singular picture disturbances in the current picture do not generate a motion signal MOT.

Wie aus Fig. 4 ersichtlich besteht das Bewegungssignal MOT für jedes bewegte Objekt A, B aus zwei Impulsen, wobei die steigende Flanke a₁, b₁ des jeweiligen ersten Impulses den Beginn des Videosignals des bewegten Objekts Ax bzw. Bx in dem, dem aktuellen Bild N folgenden Bilde N+1 kennzeichnet und die fallende Flanke a₂, b₂ des jeweiligen zweiten Impulses das Ende des Videosignals des bewegten Objekts Az, Bz in dem, dem aktuellen Bild N vorangegangenem Bilde N-1 kennzeichnet. Da durch die Bewegung eines Objekts, sich dessen Abbilder auf aufeinanderfolgenden Bildern nur noch teilweise überdecken, bzw. bei entsprechend schneller Bewegung überhaupt nicht mehr überdecken, wird für den Bereich der Nichtüberdeckung kein Bewegungssignal MOT erzeugt und es bildet sich somit im Bewegungssignal MOT eine Signallücke a₀ bzw. b₀. As can be seen from Fig. 4, the motion signal MOT for each moving object A, B consists of two pulses, the rising edge a₁, b₁ of the respective first pulse the beginning of the video signal of the moving object A x or B x in the current Image N indicates the following images N + 1 and the falling edge a₂, b₂ of the respective second pulse denotes the end of the video signal of the moving object A z , B z in the image N-1 preceding the current image N. Since the movement of an object, the images of which on successive images only partially overlap, or no longer overlap if the movement is correspondingly fast, no motion signal MOT is generated for the area of non-coverage and a signal gap a₀ is thus formed in the motion signal MOT or b₀.

Da das Bewegungssignal MOT die Differenzen zwischen aktuellen Bild N und dem, dem aktuellen Bild vorangegangenem Bild N-1 bzw. dem, dem aktuellen Bild folgenden Bild nicht berücksichtigt, ist das Bewegungssignal MOT für sich alleine noch nicht aussagekräftig. Durch Verknüpfung der Ausgangssignale des ersten und des zweiten Komparators 104, 105 in einem ersten ODER-Gatter 112 zu einem ersten Bewegungshilfssignal WM1 und weiterer Verknüpfung des negierten ersten Bewegungshilfssignals WM1 mit dem Bewegungssignal MOT in einem dritten UND- Gatter 113 wird ein zweites Bewegungshilfssignal WM2 gebildet, welches in seiner Länge dem Bewegungssignal MOT entspricht. Bei sich in der Bewegung teilweise überdeckenden Objekten A wird hierdurch die Signallücke a₀ auf den Bereich verbreitert, den das bewegte Objekt im aktuellen Bild N einnimmt.Since the motion signal MOT does not take into account the differences between the current image N and the image N-1 preceding the current image or the image following the current image, the motion signal MOT alone is not yet meaningful. By combining the output signals of the first and second comparators 104 , 105 in a first OR gate 112 to form a first auxiliary motion signal W M1 and further linking the negated first auxiliary motion signal W M1 to the motion signal MOT in a third AND gate 113 , a second auxiliary motion signal becomes W M2 formed, which corresponds in length to the motion signal MOT. In the case of objects A partially overlapping in the movement, the signal gap a₀ is thereby broadened to the area which the moving object occupies in the current image N.

Da das Prinzip der Bewegungsdetektion darin besteht, bei hinreichend kleiner Signallücke a₀, b₀ von einem bewegten Objekt auszugehen, wird im folgenden die Breite der Signallücken ausgewertet, indem das zweite Bewegungshilfssignal WM₂ einem ersten H/V-Signalexpander 114 zugeführt ist, der Signalimpulse um eine bestimmte Signalbreite H sowohl in horizontaler Richtung als auch in vertikaler Richtung zu einem dritten Bewegungshilfssignal WM₃ vergrößert. Im Ausführungs­ beispiel ist dieser H/V-Signalexpander als Maximumfilter ausgeführt, welches den Wert des jeweils betrachteten Bezugssignals, das heißt in diesem Fall, den Wert des jeweils gerade am H/V-Signalexpander 114 anliegenden zweiten Hilfssignals WM₂ durch den Maximalwert der dem Bezugssignal benachbarten Signalwerte ersetzt. Die Anzahl der betrachteten benachbarten Signalwerte ergibt die maximale Signalverbrei­ terung H. Da bei diesem ersten Ausführungsbeispiel nur binäre Signale verarbeitet werden entspricht die Maximumfunktion einem ODER-Vergleich über alle betrach­ teten Werte des zweiten Bewegungshilfssignal WM₂.Since the principle of motion detection is to start with a sufficiently small signal gap a₀, b₀ from a moving object, the width of the signal gaps is evaluated in the following by the second auxiliary motion signal WM₂ being fed to a first H / V signal expander 114 , the signal pulses by one certain signal width H increased both in the horizontal direction and in the vertical direction to a third auxiliary motion signal WM₃. In the execution of this H / V signal expander is designed as a maximum filter which the value of the respectively considered the reference signal, that is, in this case, the value of each just applied to the H / V signal expander 114 second auxiliary signal WM₂ by the maximum value of the reference signal adjacent signal values replaced. The number of adjacent signal values considered gives the maximum signal broadening H. Since only binary signals are processed in this first exemplary embodiment, the maximum function corresponds to an OR comparison of all the values considered of the second movement auxiliary signal WM 2.

Das dritte Bewegungshilfssignal WM₃ ist anschließend einem H/V-Signalkompressor 115 zugeführt, welcher einen Signalimpuls um eine bestimmte Signalbreite sowohl in horizontaler als auch vertikaler Richtung verkürzt und auf diese Weise ein viertes Bewegungshilfssignal WM₄ erzeugt. Im Ausführungsbeispiel ist dieser H/V-Signal­ kompressor 115 als Minimumfilter ausgeführt, welcher den Wert des jeweils gerade am H/V-Signalkompressor 115 anliegenden dritten Hilfssignals WM₃ durch den Minimalwert der dem Bezugssignal benachbarten Signalwerte ersetzt. Die Anzahl der betrachteten benachbarten Signalwerte ergibt die Größe der Signalverkürzung H′. Bei den verwendeten binärer Signalen entspricht die Minimumfunktion einem UND-Vergleich über alle betrachteten Werte des dritten Bewegungshilfssignal WM₃.The third auxiliary motion signal WM₃ is then fed to an H / V signal compressor 115 , which shortens a signal pulse by a certain signal width in both the horizontal and vertical directions and in this way generates a fourth auxiliary motion signal WM₄. In the exemplary embodiment, this H / V signal compressor 115 is designed as a minimum filter, which replaces the value of the third auxiliary signal WM 3 present at the H / V signal compressor 115 by the minimum value of the signal values adjacent to the reference signal. The number of adjacent signal values considered gives the size of the signal shortening H '. In the binary signals used, the minimum function corresponds to an AND comparison of all the values under consideration of the third auxiliary movement signal WM₃.

War die zu detektierende Signallücke hinreichend klein, so ist durch die Signalver­ breiterung und Signalverkürzung die im Bewegungshauptsignal WM ursprünglich vorhandene Lücke a₀, b₀ vollständig geschlossen worden und somit ein bewegtes Objekt A, B detektiert.If the signal gap to be detected was sufficiently small, the signal ver Widening and shortening of the original motion signal WM existing gap a₀, b₀ have been completely closed and thus a moving one Object A, B detected.

Wie man der Fig. 4 entnehmen kann, überragt die Breite des vierten Bewegungs­ hilfssignals WM₄ den Bereich, den das sich bewegende Objekt im aktuellen Bild einnimmt um so mehr, je schneller sich das Objekt im Videobild bewegt. Bei geringen Bewegungsgeschwindigkeiten, die den Großteil von Filmmaterial bilden, liegt dieser Bereich sehr eng am sich bewegenden Objekt an, so daß eine Verwen­ dung eines dem vierten Bewegungshilfssignals entsprechenden Signals zur Verhin­ derung einer Störverdeckung, wie in der Vergangenheit geschehen, zu allenfalls geringfügigen Beinträchtigungen des subjektiven Bildeindrucks führte. Bei sich sehr schnell bewegenden Objekten hätte die Verwendung des vierten Bewegungshilf­ signals, bzw. eines des diesem Bewegungshilfssignals entsprechenden Signals die Folge, daß in einem entsprechend großen Bereich um ein schnell bewegtes Objekt herum, die Störunterdrückung ausgeschalten bleibt. In diesem Bildbereich bleiben singuläre Bildstörungen somit voll sichtbar. Da schnell bewegte Objekte häufig auch sehr klein sind, wäre im ungünstigsten Fall bei entsprechender Anzahl und Vertei­ lung der schnell bewegten Objekte, z. B. bei Regentropfen die Störunterdrückung im ganzen Bild ausgeschaltet. Aber auch bei einzelnen schnell bewegten Objekten, wie einem Tennisball kann dies übermäßig als störend empfunden werden, da der Betrachter ständig das sich bewegende Objekt mit den Augen verfolgt und somit auch die um das bewegte Objekt auftretenden, nicht unterdrückten Störungen mitverfolgt.As can be seen in FIG. 4, the width of the fourth auxiliary motion signal WM₄ exceeds the area that the moving object occupies in the current image, the faster the object moves in the video image. At low movement speeds, which form the majority of film material, this area lies very close to the moving object, so that a use of a signal corresponding to the fourth movement auxiliary signal to prevent interference masking, as happened in the past, can at most only slightly impair the subjective image impression. In the case of very fast-moving objects, the use of the fourth auxiliary motion signal, or one of the signals corresponding to this auxiliary motion signal, would have the consequence that interference suppression remains switched off in a correspondingly large area around a rapidly moving object. Singular image disturbances thus remain fully visible in this image area. Since fast moving objects are often very small, would be in the worst case with the appropriate number and distribution of fast moving objects, for. B. in the case of raindrops the interference suppression is switched off in the whole picture. But even with individual fast-moving objects, such as a tennis ball, this can be perceived as excessively annoying, since the viewer constantly follows the moving object with his eyes and thus also follows the non-suppressed disturbances that occur around the moving object.

Zur Beschränkung des Bereichs, in welchem eine Störsignalbefreiung unterdrückt wird, auf den Bereich, den ein bewegtes Objekt im aktuellen Bild tatsächlich einnimmt, wird das vierte Bewegungshilfssignal WM₄ einem Eingang eines dritten UND-Gatters 116 und das zweite Bewegungshilfssignal WM₂ über ein zwischen­ geschaltetes zweites Laufzeitglied 117 einem negierten Eingang des dritten UND- Gatters 116 zugeführt. Die Laufzeitkonstante des zweiten Laufzeitgliedes 116 ist hierbei so zu bemessen, daß sie der Signaldurchlaufzeit von H/V-Signalexpander 114 und H/V-Signalkompressor 115 entspricht. Auf diese Weise ergibt sich am Ausgang des dritten UND-Gatters 116 schließlich ein Bewegungssignal Wmot, welches nunmehr in Beginn und Ende dem Beginn und Ende des Videosignals des bewegten Objekts Ay, By im jeweils aktuellen Bild N entspricht.To limit the area in which interference signal suppression is suppressed to the area that a moving object actually occupies in the current image, the fourth auxiliary motion signal WM₄ is an input of a third AND gate 116 and the second auxiliary motion signal WM₂ via an interposed second delay element 117 fed to a negated input of the third AND gate 116 . The transit time constant of the second transit time element 116 is to be dimensioned such that it corresponds to the signal transit time of the H / V signal expander 114 and the H / V signal compressor 115 . This finally results in a movement signal W mot at the output of the third AND gate 116 , which now corresponds at the beginning and end to the beginning and end of the video signal of the moving object A y , B y in the current image N.

Das Bewegungssignal Wmot ist nunmehr einem negiertem Eingang des zweiten UND- Gatters 108 zugeführt. Ferner ist dem dritten UND-Gatter 108 an einem dritten Eingang auch noch das erste Schaltsignal b zugeführt. Durch UND-Verknüpfung von Kontrastsignal WD, negiertem Bewegungssignal Wmot und erstem Schaltsignal b wird nur dann ein Ausgangssignal zur Störstellenverdeckung erzeugt, wenn eine singuläre (weiße) Störstelle erkannt wurde, die nicht durch die Bewegung eines Objekts hervorgerufen wurde und gleichzeitig die Verdeckung von weißen Störstellen mittels des ersten Schaltsignals b ausgewählt ist.The motion signal W mot is now fed to a negated input of the second AND gate 108 . Furthermore, the third switching gate 108 is also supplied with the first switching signal b at a third input. By ANDing the contrast signal W D , the negated motion signal W mot and the first switching signal b, an output signal for fault coverage is only generated if a singular (white) fault location was recognized that was not caused by the movement of an object and at the same time covered white impurities is selected by means of the first switching signal b.

Zur Detektion von schwarzen Bildstörungen ist das Ausgangssignal y-x des ersten Differenzbildners 101 ebenfalls einem vierten Komparator 118, das Ausgangssignal y-z des zweiten Differenzbildners 102 ebenfalls einem fünften Komparator 119 zugeführt. Vierter und fünfter Komparator 118 bzw. 119 vergleichen ihr Eingangs­ signal mit dem negativen Wert einer Schaltschwelle TH. Die Ausgangssignale von viertem und fünften Komparator 118, 119 sind sowohl einem zweiten ODER-Gatter 120 als auch einem fünften UND-Gatter 121 zugeführt. Der Ausgang des zweiten ODER-Gatters 120 ist dem negierenden Eingang eines sechsten UND-Gatters 122 verbunden. Der andere Eingang des sechsten UND-Gatters 122 ist mit dem Ausgang des dritten Komparators 111 verbunden. Der Ausgang des sechsten UND-Gatters 122 ist mit dem Eingang eines dritten Laufzeitgliedes 123 als auch mit dem Eingang eines zweiten H/V-Signalexpanders 124 verbunden. Der Ausgang des zweiten H/V- Signalexpanders 124 ist mit dem Eingang eines zweiten H/V-Signalkompressors 125 verbunden. Der negierende Eingang eines siebten UND-Gatters 126 ist mit dem Ausgang des dritten Laufzeitgliedes 123 und der andere Eingang dieses siebten UND-Gatters 126 ist mit dem Ausgang des zweiten H/V-Signalkompressors 125 verbunden. Der Ausgang des siebten UND-Gatters 126 ist mit einem negierenden Eingang eines achten UND-Gatters 127 verbunden dessen zweiten Eingang das zweite Steuersignal b zugeführt ist. Der Ausgang des fünften UND-Gatters 121 ist über ein zwischengeschaltetes viertes Laufzeitglied 128 mit dem dritten Eingang des achten UND-Gatters 127 verbunden.For the detection of black image disturbances, the output signal yx of the first difference former 101 is also fed to a fourth comparator 118 , the output signal yz of the second difference former 102 is also fed to a fifth comparator 119 . Fourth and fifth comparators 118 and 119 compare their input signal with the negative value of a switching threshold TH. The output signals from fourth and fifth comparators 118 , 119 are fed to both a second OR gate 120 and a fifth AND gate 121 . The output of the second OR gate 120 is connected to the negating input of a sixth AND gate 122 . The other input of the sixth AND gate 122 is connected to the output of the third comparator 111 . The output of the sixth AND gate 122 is connected to the input of a third delay element 123 and to the input of a second H / V signal expander 124 . The output of the second H / V signal expander 124 is connected to the input of a second H / V signal compressor 125 . The negating input of a seventh AND gate 126 is connected to the output of the third delay element 123 and the other input of this seventh AND gate 126 is connected to the output of the second H / V signal compressor 125 . The output of the seventh AND gate 126 is connected to a negating input of an eighth AND gate 127 , the second input of which is supplied with the second control signal b. The output of the fifth AND gate 121 is connected to the third input of the eighth AND gate 127 via an interposed fourth delay element 128 .

Der Aufbau des gerade beschriebenen Schaltungsteils entspricht dem bereits vorstehend beschriebenen Schaltungsteils zur Detektion von weißen Störstellen bis auf das Vorzeichen der in den vierten und fünften Komparatoren 118, 119 verwen­ deten Schwellwerte. Aufgrund der negativen Schwellwerte wird nunmehr eine Videosignaländerung von hellen zu dunklem Bildinhalten detektiert, so daß am Ausgang des achten UND-Gatters 127 anstehende zweite Kontrastsignal KB erkannte schwarze singuläre Bildstörungen, entsprechende Auswahl dieser Detektionsart durch das zweite Steuersignal b vorausgesetzt, signalisiert. In einem dritten ODER- Gatter 109 werden weißes Störstellensignal KW und schwarzes Störstellensignal KB zu dem Störstellensignal K zusammengefaßt, so daß je nach Steuersignalen b, w für nur weiße oder nur schwarze oder weiße und schwarze singuläre Bildstörungen ein Umschaltsignal ausgegeben wird. The structure of the circuit section just described corresponds to the circuit section for the detection of white defects already described except for the sign of the threshold values used in the fourth and fifth comparators 118 , 119 . On the basis of the negative threshold values, a video signal change from light to dark picture content is now detected, so that second contrast signal K B present at the output of the eighth AND gate 127 is recognized as black singular picture disturbances, provided that this type of detection is appropriately selected by the second control signal b. In a third OR gate 109 , white impurity signal K W and black impurity signal K B are combined to form the impurity signal K, so that, depending on the control signals b, w, a switching signal is output for only white or only black or only white or black and singular image interference.

Aufgrund der relativ geringen Komplexität der Schaltung ließ sich dieses Ausführungsbeispiel noch mit programmierbaren Logik-Schaltkreisen ausführen. Insofern noch andere Funktionen innerhalb des Gerätes zur Videosignalbearbeitung realisiert werden, kann sich auch die Verwendung eines Signalprozessors oder eines anderen programmgesteuerten Rechenwerks als die vorteilhaftere Lösung anbieten.Due to the relatively low complexity of the circuit, this could be done Execute embodiment with programmable logic circuits. In this respect, other functions within the device for video signal processing can be realized, the use of a signal processor or a offer other program-controlled arithmetic unit as the more advantageous solution.

Fig. 5 zeigt eine besondere Ausführungsform der Erfindung, bei dem die Arithmetisch-Logische Einheit 10 anstelle eines binären Störstellensignals K ein mehrwertiges bzw. analoges Steuersignal erzeugt, wobei die Wertigkeit bzw. Signalstärke des Störstellensignals ein Maß für die Güte der Detektion darstellt. Fig. 5 shows a particular embodiment of the invention, wherein the arithmetic logic unit 10 generates a multi-valued or analog control signal instead of a binary Störstellensignals K, where the valence or signal strength represents the Störstellensignals a measure of the quality of the detection.

Der Arithmetische-Logischen Einheit 10 nach Fig. 5 sind als Videoeingangssignale die mehrwertig, d. h. beispielsweise mit 8 Bit quantisierte Videosignale x, y, z zugeführt. In einem ersten Ein-Quadranten-Subtrahierer 201 wird die Differenz y-x, in einem zweiten Ein-Quadranten-Subtrahierer 202 die Differenz y-z, in einem Betrags-Subtrahierer 203 die Differenz x-z, in einem dritten Ein-Quadranten-Subtra­ hierer 204 die Differenz x-y und in einem vierten Ein-Quadranten-Subtrahierer 205 die Differenz z-y der Videosignale x, y, z gebildet. Erster, zweiter, dritter und vierter Ein-Quadranten-Subtrahierer 201, 202, 204, 205 sowie die im folgenden noch erwähnten Ein-Quadranten-Subtrahierer sind so ausgestaltet, daß nur positive Differenzen ausgegeben werden. Negative Differenzen werden als Wert Null ausgegeben, was einer Begrenzung des Ausgangssignals entspricht.The arithmetic-logic unit 10 according to FIG. 5 is supplied as video input signals which are multi-valued, ie video signals x, y, z quantized with 8 bits, for example. In a first one-quadrant subtractor 201 the difference yx, in a second one-quadrant subtractor 202 the difference yz, in an amount subtractor 203 the difference xz, in a third one-quadrant subtractor 204 the difference xy and the difference zy of the video signals x, y, z is formed in a fourth one-quadrant subtractor 205 . First, second, third and fourth one-quadrant subtractors 201 , 202 , 204 , 205 as well as the one-quadrant subtractors mentioned below are designed in such a way that only positive differences are output. Negative differences are output as a value of zero, which corresponds to a limitation of the output signal.

In der digitalen Ausführungsform ist ein solcher Ein-Quadranten-Subtrahierer beispielsweise so aufgebaut, daß ein Subtrahierer die beiden Digitalwerte an seinen beiden Eingängen voneinander subtrahiert und das Subtraktionsergebnis einem Vergleicher übergibt, der überprüft, ob das Subtraktionsergebnis ein positives Vorzeichen aufweist. Nur dann wird das Subtraktionsergebnis selbst weitergereicht, ansonsten, bei negativen Vorzeichen des Subtraktionsergebnisses, wird der Wert Null ausgegeben. In the digital embodiment, such is a one-quadrant subtractor For example, constructed so that a subtractor on the two digital values subtracted both inputs and the subtraction result one Passes comparator, which checks whether the subtraction result is positive Has a sign. Only then is the subtraction result itself passed on, otherwise, if the subtraction result is negative, the value becomes Output zero.  

Im folgenden wird der Eingang eines solchen Ein-Quadranten-Subtrahierers, dessen Einganssignal von einem anderen Eingangssignal subtrahiert wird, als invertierender Eingang bezeichnet. Dementsprechend wird der andere Eingang, von dessen Eingangssignal das am invertierenden Eingang anliegende Signal subtrahiert wird, als nicht-invertierender Eingang bezeichnet.The following is the input of such a one-quadrant subtractor, its Input signal is subtracted from another input signal as inverting Designated entrance. Accordingly, the other entrance from which Input signal the signal present at the inverting input is subtracted, referred to as a non-inverting input.

Der Betrags-Subtrahierer 203 bildet den Betrag der Differenz x-z, d. h. seine Ausgangswerte sind stets positiv. Zur Gewinnung eines (quasi-)analogen Störstellensignals kW für weiße Bildstörungen ist das Ausgangssignal y-x < 0 des ersten Ein-Quadranten-Subtrahierers 201 und das Ausgangssignal y-z < 0 des zweiten Ein-Quadranten-Subtrahierers 202 sowohl einem ersten Minimumbildner 206 als auch einem ersten Maximumbildner 210 zugeführt. Über ein erstes Laufzeitglied 207 ist das Ausgangssignal wD = Min(y-x < 0, y-z < 0) des ersten Minimumbildners 206 einem ersten Multiplexer 208 zugeführt, dessen anderer Eingang mit Masse verbunden ist. Dem Steuereingang des ersten Multiplexers 208 ist das Steuersignal w zugeführt. In Abhängigkeit vom Steuersignal w wird entweder das Kontrastsignal wD (Erkennung weißer singulärer Bildstörungen eingeschaltet) oder nur Signalmasse (Erkennung weißer singulärer Bildstörungen abgeschaltet) zum Ausgang des ersten Multiplexers 208 durchgeschalten. Der Ausgang des ersten Multiplexers 208 ist an den nicht-invertierenden Eingang eines fünften Ein-Quadranten-Subtrahierers 209 geführt.The amount subtractor 203 forms the amount of the difference xz, ie its output values are always positive. To obtain a (quasi) analog impurity signal k W for white image interference, the output signal yx <0 of the first one-quadrant subtractor 201 and the output signal yz <0 of the second one-quadrant subtractor 202 are both a first minimum generator 206 and one first maximum former 210 supplied. Via a first delay element 207 , the output signal w D = Min (yx <0, yz <0) of the first minimum former 206 is fed to a first multiplexer 208 , the other input of which is connected to ground. The control signal w is supplied to the control input of the first multiplexer 208 . Depending on the control signal w, either the contrast signal w D (detection of white singular image interference switched on) or only signal ground (detection of white singular image interference switched off) is switched through to the output of the first multiplexer 208 . The output of the first multiplexer 208 is led to the non-inverting input of a fifth one-quadrant subtractor 209 .

Das Ausgangssignal wm₁ = Max(y-x < 0, y-z < 0) des ersten Maximumbildners 210 wird in einem sechsten Ein-Quadranten-Subtrahierer 211 vom Ausgangssignal mot des Betrags-Subtrahierers 203 subtrahiert. Das Ausgangssignal wm₂ des sechsten Ein- Quadranten-Subtrahierers 211 ist einem ersten H/V-Signalexpander 212 und dessen Ausgangssignal wm₃ einem ersten H/V-Signalkompressor 213 zugeführt. In einem siebten Ein-Quadranten-Subtrahierer 214 wird vom Ausgangssignal wm₂ des ersten H/V-Signalkompressor 213, das in einem zweiten Laufzeitglied 215 laufzeitverzö­ gerte Eingangssignal wm₂ des ersten H/V-Signalexpanders subtrahiert. Die Signal­ laufzeit des zweiten Laufzeitgliedes 215 entspricht der Signallaufzeit durch ersten H/V-Signalexpander 212 und ersten Signalkompressor 213. Das Ausgangssignal wmot des siebten Ein-Quadranten-Subtrahierers 214 ist dem invertierenden Eingang des fünften Ein-Quadranten-Subtrahierers 209 zugeführt. Am Ausgang des fünften Ein- Quadranten-Subtrahierers 209 ergibt sich hierdurch das analoge Störstellensignal kW für singuläre weiße Bildstörungen.The output signal wm₁ = Max (yx <0, yz <0) of the first maximum generator 210 is subtracted in a sixth one-quadrant subtractor 211 from the output signal mot of the amount subtractor 203 . The output signal wm₂ of the sixth one-quadrant subtractor 211 is a first H / V signal expander 212 and its output signal wm₃ is fed to a first H / V signal compressor 213 . In a seventh one-quadrant subtractor 214 is subtracted from the output signal wm₂ of the first H / V signal compressor 213 , the delayed input signal wm₂ of the first H / V signal expander in a second delay element 215 . The signal delay time of the second delay element 215 corresponds to the signal delay time by the first H / V signal expander 212 and the first signal compressor 213 . The output signal w mot of the seventh one-quadrant subtractor 214 is fed to the inverting input of the fifth one-quadrant subtractor 209 . At the output of the fifth single-quadrant subtractor 209, this results in the analog impurity signal k W for singular white image interference.

Um das analoge Störstellensignal kB für singuläre schwarze Bildstörungen zu gewinnen, ist das Ausgangssignal x-y < 0 des dritten Ein-Quadranten-Subtrahierers 204 und das Ausgangssignal z-y < 0 des vierten Ein-Quadranten-Subtrahierers 205 einem zweiten Minimumbildner 222 und einem zweiten Maximumbildner 216 zugeführt. Das Ausgangssignal bD = Min(x-y < 0, z-y < 0) des zweiten Miniumbild­ ners 222 bildet das Kontrastsignal zur Anzeige von vermutlich schwarzen Bild­ störungen. Über ein drittes Laufzeitglied 223 ist das zweite Kontrastsignal bD einem zweiten Multiplexer 224 zugeführt. Je nach Ansteuerung des zweiten Multiplexers 224 mittels des Schaltsignals b wird entweder das zweite Kontrastsignal bD oder das am anderen Eingang des zweiten Multiplexers anliegende Massesignal durchgeschal­ ten. Der Ausgang des ersten Multiplexer 224 ist an den nicht-invertierenden Eingang eines achten Ein-Quadranten-Subtrahierers 221 geführt.In order to obtain the analog impurity signal k B for singular black image disturbances, the output signal xy <0 of the third one-quadrant subtractor 204 and the output signal zy <0 of the fourth one-quadrant subtractor 205 are a second minimum generator 222 and a second maximum generator 216 fed. The output signal b D = Min (xy <0, zy <0) of the second Miniumbilders 222 forms the contrast signal to display presumably black picture disturbances. The second contrast signal b D is fed to a second multiplexer 224 via a third delay element 223 . Depending on the activation of the second multiplexer 224 by means of the switching signal b, either the second contrast signal b D or the ground signal present at the other input of the second multiplexer is switched through. The output of the first multiplexer 224 is connected to the non-inverting input of an eighth one-quadrant Subtractor 221 performed .

Das Ausgangssignal bm₁ = Max(x-y < 0, z-y < 0) des zweiten Maximumbildners 216 wird in einem neunten Ein-Quadranten-Subtrahierer 217 vom Ausgangssignal mot des zweiten Subtrahierers 203 subtrahiert. Das Ausgangssignal bm₂ des neunten Subtrahierers 217 ist einem zweiten H/V-Signalexpander 218 und dessen Ausgangs­ signal bm₃ einem zweiten H/V-Signalkompressor 219 zugeführt. In einem zehnten Ein-Quadranten-Subtrahierer 220 wird vom Ausgangssignal bm₄ des zweiten H/V- Signalkompressor 219, das in einem vierten Laufzeitglied 220 laufzeitverzögerte Eingangssignal bm₂ des zweiten H/V-Signalexpander 218 subtrahiert. Die Signal­ laufzeit des vierten Laufzeitgliedes 220 entspricht der Signallaufzeit durch zweiten H/V-Signalexpander 212 und zweiten Signalkompressor 213. Das Ausgangssignal bmot des zehnten Ein-Quadranten-Subtrahierers 220 ist dem invertierenden Eingang des achten Ein-Quadranten-Subtrahierers 221 zugeführt.The output signal bm₁ = Max (xy <0, zy <0) of the second maximum former 216 is subtracted from the output signal mot of the second subtractor 203 in a ninth one-quadrant subtractor 217 . The output signal bm₂ of the ninth subtractor 217 is a second H / V signal expander 218 and its output signal bm₃ is fed to a second H / V signal compressor 219 . In a tenth one-quadrant subtractor 220 is subtracted from the output signal bm₄ of the second H / V signal compressor 219 , the delayed input signal bm₂ of the second H / V signal expander 218 in a fourth delay element 220 . The signal delay time of the fourth delay element 220 corresponds to the signal delay time by second H / V signal expander 212 and second signal compressor 213 . The output signal b mot of the tenth one-quadrant subtractor 220 is fed to the inverting input of the eighth one-quadrant subtractor 221 .

H/V-Signalexpander 212, 218 und H/V-Signalkompressor 213, 219 sind bei diesem Ausführungsbeispiel wieder so ausgeführt, daß sie den jeweils betrachteten Bild­ punkt mit den ihm räumlich benachbarten Bildpunkten vergleichen und ihn durch den jeweils gefunden Maximalwert, bzw. Minimalwert ersetzen.H / V signal expanders 212 , 218 and H / V signal compressor 213 , 219 are again carried out in this exemplary embodiment in such a way that they compare the image in question with the image points spatially adjacent to it and compare it with the maximum or minimum value found replace.

In einem zweiten Maximalwertbildner 225 wird schließlich aus den Ausgangssigna­ len des fünften Ein-Quadranten-Subtrahierers 209 und des achten Ein-Quadranten- Subtrahierers 221 der Maximalwert k = Max(kW,kB) dieser beiden Signale bestimmt und einem Multiplizierer 226 zugeführt. Der Multiplizierer 226 multipliziert den Eingangswert k mit einem vorgebbaren Wert G, mittels welchem die Überblen­ dungsgeschwindigkeit vorgeben werden kann. Durch anschließende Begrenzung des Ausgangswertes k* des Multiplizierers 226 in einem Begrenzer 227 wird das Ausgangssignal der Arithmetisch-Logischen Einheit 10 auf einen Maximalwert begrenzt.In a second maximum value generator 225 , the maximum value k = Max (k W , k B ) of these two signals is finally determined from the output signals of the fifth one-quadrant subtractor 209 and the eighth one-quadrant subtractor 221 and fed to a multiplier 226 . The multiplier 226 multiplies the input value k by a predeterminable value G, by means of which the fading speed can be predefined. By subsequently limiting the output value k * of the multiplier 226 in a limiter 227 , the output signal of the arithmetic logic unit 10 is limited to a maximum value.

Anhand der Fig. 6 wird nun die Wirkungsweise der in Fig. 5 dargestellten Arithmetisch-Logischen Einheit 10 für eine Verdeckung von weißen singulären Bildstörungen beschrieben. Fig. 6 zeigt mit Ax, Ay, Az die Videosignale eines bewegten Objekts und mit C das Videosignal einer singulären Bildstörung.The mode of operation of the arithmetic-logic unit 10 shown in FIG. 5 for masking white singular image disturbances will now be described with reference to FIG. 6. Fig. 6 shows by A x, A y, A z, the video signals of a moving object and the video signal C with a singular image disturbance.

Das am Ausgang des ersten Minimumbildners 206 anstehende Kontrastsignal wD entspricht in Signalstärke und zeitlichem Verlauf des Signals genau der singulären Bildstörung C. Für das bewegte Objekt A wird aber wiederum ein Kontrastsignal erzeugt, welches durch die Bewegungsdetektion unterdrückt werden muß. The contrast signal w D present at the output of the first minimum former 206 corresponds exactly to the singular image disturbance C in signal strength and temporal course of the signal. However, a contrast signal is again generated for the moving object A, which must be suppressed by the movement detection.

Das durch Subtraktion des ersten Bewegungshilfssignals wm₁ von dem Bewegungs­ signal mot gewonnene zweite Bewegungshilfsignal wm₂ enthält bei einem sich bewegenden Objekten C wiederum Signallücken, die durch H/V-Signalexpander und H/V-Signalkompressor auf dem jeweiligen höchstem Niveau der benachbarten Bildabtastwerte geschlossen wird. Das hierbei erhaltene vierte Bewegungshilfssignal erstreckt sich jedoch in seiner Länge vom rechten Rand des bewegten Objekts Az in dem, dem aktuellen Bild N vorangegangenem Bild N-1 bis zum linken Rand des bewegten Objekts Ax in dem, dem aktuellen Bild N folgenden Bild N+1. Das durch Maskierung des vierten Bewegungshilfssignals wm₄ mit dem zweiten Bewegungs­ hilfssignal wm₂ im siebten Ein-Quadranten-Subtrahierer 214 entstehende Bewegungs­ hauptsignal wmot entspricht in Länge und Amplitude dem für das bewegte Objekt A erzeugtem Kontrastsignal wD. Durch Subtraktion des Bewegungshauptsignals wmot vom Kontrastsignal wD wird aus einem Kontrastsignal nur genau der Bereich herausgestanzt, den ein bewegtes Objekt im aktuellen Bild N tatsächlich auch einnimmt. Um das Bild des bewegten Objekts herum, insbesondere die Bereiche, die das Bild des bewegten Objektes im vorangenommen Bild bzw. im folgenden Bild einnimmt und die Bereiche zwischen diesen Bildern werden singuläre Bildstörungen sicher unterdrückt.The obtained by subtracting the first movement auxiliary signal wm₁ from the movement signal mot second movement auxiliary signal wm₂ contains in turn moving gaps C signal gaps, which is closed by H / V signal expanders and H / V signal compressor at the respective highest level of the adjacent image samples. However, the fourth auxiliary motion signal obtained in this way extends in length from the right edge of the moving object A z in the image N-1 preceding the current image N to the left edge of the moving object A x in the image N following the current image N. +1. The resulting by masking the fourth auxiliary motion signal wm zweiten with the second auxiliary motion signal wm₂ in the seventh one-quadrant subtractor 214 , the main motion signal w mot corresponds in length and amplitude to the contrast signal w D generated for the moving object A. By subtracting the main motion signal w mot from the contrast signal w D , only the area which a moving object in the current image N actually occupies is punched out of a contrast signal. Around the image of the moving object, in particular the areas that the image of the moving object occupies in the assumed image or in the following image and the areas between these images, singular image disturbances are reliably suppressed.

Durch den dritten Maximumbildner 225 wird das jeweils stärkere Störstellensignal kW, kB als Störstellensignal ausgewählt. Im Prinzip entspricht diese Auswahl einer ODER-Funktion. Sofern eine singuläre Bildstörung vorliegt, kann diese entweder als weiße Bildstörung oder als schwarze Bildstörung auftreten, aber nie gleichzeitig als weiße und schwarze Bildstörung. Wie aus Fig. 6 ersichtlich ist das Störstellen­ signal k eine analoges Signal. Bei Verwendung eines Videomischers anstelle eines in Fig. 2 gezeigten Umschalters 10 kann nun mittels des Störstellensignal k zwischen Originalvideosignal und median-gefilterten Videosignal eine Überblendung vorgenommen werden. Durch das analoge Signal mit stufenlos bzw. mehrstufig steigenden und fallenden Signalflanken, gegebenenfalls noch etwas geglättet durch entsprechende Filterung, wird ein weicher Übergang zwischen Originalbild und dem zur Störaustastung verwendeten median-gefilterten Bildbereichen geschaffen. Dies verbessert wesentlich das subjektive Empfinden bei der Betrachtung eines dermaßen entstörten Bildes.The respective stronger fault signal k W , k B is selected as the fault signal by the third maximum generator 225 . In principle, this selection corresponds to an OR function. If there is a singular image disturbance, this can occur either as white image disturbance or as black image disturbance, but never at the same time as white and black image disturbance. As shown in FIG. 6, the impurity is signal k is an analog signal. When using a video mixer instead of a changeover switch 10 shown in FIG. 2, a cross-fading can now be carried out between the original video signal and the median-filtered video signal by means of the impurity signal k. A smooth transition between the original image and the median-filtered image areas used for noise blanking is created by the analog signal with continuously or multistage rising and falling signal edges, possibly even a little bit smoother by appropriate filtering. This significantly improves the subjective feeling when viewing a picture that is so de-jammed.

In der gezeigten Ausgestaltung der Erfindung kann die Steilheit der Signalflanken des quasianalogen Störstellensignal k durch Multiplikation mit dem Steilheitssteuer­ signal G vergrößert werden (G < 1). Dies hat den Vorteil, daß die Unterdrückung einer singulären Bildstörung bereits an Bildpunkten einsetzt, die bei binärer Ent­ scheidung in einer Arithmetisch-Logischen Einheit 10 nach Fig. 3 noch nicht als singuläre Bildstörung erkannt worden wären. Hierbei verhindert der Begrenzer 227, daß die Signalamplitude des versteilerten Störstellensignal k* den maximal zulässi­ gen Steuerpegel des Videomischers überschreitet.In the embodiment of the invention shown, the steepness of the signal edges of the quasi-analogous fault signal k can be increased by multiplication with the steepness control signal G (G <1). This has the advantage that the suppression of a singular image disturbance already begins at pixels that would not have been recognized as a singular image disturbance in a decision in an arithmetic-logic unit 10 according to FIG. 3. Here, the limiter 227 prevents the signal amplitude of the distributed impurity signal k * from exceeding the maximum permissible control level of the video mixer.

Die Anforderungen an die Güte der Überblendung und der Störstellenverdeckung bestimmen die Datenwortbreite der quantisierten Videoeingangssignale x, y, z. Prinzipiell sind die benötigten Funktionen auch mit analogen Signalen und analogen Bausteinen realisierbar, da jedoch eine Verwendung von acht bit breiten Datenwör­ tern als Störstellensignal k sich mehr als ausreichend erwiesen hat, dürfte die Ver­ wendung von programmierbaren Logischen Bauelementen, bzw. programmgesteu­ erten Signalprozessoren die kostengünstigste Alternative darstellen. Eine besonders günstiges Kosten-Nutzen Verhältnis ergibt sich in einer bevorzugten Ausführungs­ form, bei der alle Signale, bis auf die Verarbeitung in den Signalexpandern 212, 218 und Signalkompressoren 213, 219 mehrwertig verarbeitet werden, die Signalexpan­ sion und Signalkompression jedoch mit Binärwerten ausgeführt wird.The requirements for the quality of the fade and the impurity masking determine the data word width of the quantized video input signals x, y, z. In principle, the required functions can also be implemented with analog signals and analog modules, but since the use of eight-bit data words as fault signal k has proven to be more than sufficient, the use of programmable logic components or program-controlled signal processors should be the most cost-effective Show alternative. A particularly favorable cost-benefit ratio results in a preferred embodiment in which all signals, apart from the processing in the signal expanders 212 , 218 and signal compressors 213 , 219 , are processed with multiple values, but the signal expansion and signal compression is carried out with binary values.

Claims (15)

1. Gerät zur Verarbeitung von Videosignalen mit einer Anordnung zur Störsignal­ befreiung mittels adaptiver Medianfilterung, die dazu vorgesehen ist, in als gestört und unbewegt klassifizierten Bildbereichen eine Fehlerverdeckung vorzunehmen, wobei vorgesehen ist, durch Vergleich von Bildinhalten mindestens eines dem aktuellen Bild (N) vorangehenden Bildes (N-1) und mindestens eines, dem aktuellen Bild (N) folgenden Bildes (N+1) ein Bewegungssignal (Wmot) zur Kennzeichnung von bewegten Bildbereichen (Ay) zu erzeugen dadurch gekennzeichnet, daß die Anordnung zur Störsignalbefreiung dazu vorgesehen ist, das Bewegungs­ signal (Wmot) mit einem Maskierungssignal (WD) zu maskieren, wobei das Maskie­ rungssignal den Beginn und das Ende eines bewegten Objekts (Ay) im aktuellen Bild (N) angibt. 1. Device for processing video signals with an arrangement for interference signal elimination by means of adaptive median filtering, which is intended to carry out error concealment in image areas classified as disturbed and unmoved, wherein it is provided by comparing image contents at least one preceding the current image (s) Image (N-1) and at least one image (N + 1) following the current image (N) to generate a motion signal (W mot ) for identifying moving image areas (A y ), characterized in that the arrangement for interference signal release is provided for this purpose is to mask the motion signal (W mot ) with a masking signal (W D ), the masking signal indicating the start and end of a moving object (A y ) in the current image (N). 2. Gerät zur Verarbeitung von Videosignalen nach Anspruch 1 dadurch gekennzeichnet, daß die Anordnung zur Störstellenbefreiung dazu vorgesehen ist, eine Klassifi­ zierung von weißen Störstellen und schwarzen Störstellen in getrennten Signal­ zweigen vorzunehmen.2. Device for processing video signals according to claim 1 characterized, that the arrangement for removing impurities is provided for a classifi Decoration of white impurities and black impurities in separate signals to make branches. 3. Gerät zur Verarbeitung von Videosignalen nach Anspruch 1, oder 2, dadurch gekennzeichnet, daß die Anordnung zu Störsignalbefreiung dazu vorgesehen ist zur Fehlerverdeckung eine Überblendung zwischen aktuellen Bild (N) und median-gefilterten Bild (N*) vorzunehmen. 3. Device for processing video signals according to claim 1 or 2, characterized, that the arrangement for interference signal release is provided for error concealment a transition between current image (N) and median-filtered image (N *) to make.   4. Gerät zur Verarbeitung von Videosignalen nach Anspruch 2 oder 3, dadurch gekennzeichnet, daß die Anordnung zur Störsignalbefreiung dazu vorgesehen ist, ein analoges, bzw. mindestens mehrwertiges Steuersignal (k) zur Ansteuerung einer Videomischstufe zu erzeugen, deren einem Videosignaleingang das Videosignal (Y) des aktuellen Bildes und deren anderem Videosignaleingang das Videosignal (Y*) des median- gefilterten Bildes (N*) zugeführt ist.4. Device for processing video signals according to claim 2 or 3, characterized, that the arrangement for interference signal exemption is provided for an analog or at least multi-value control signal (k) for controlling a video mixer to generate one video signal input of the video signal (Y) of the current Image and their other video signal input the video signal (Y *) of the median filtered image (N *) is supplied. 5. Gerät zur Verarbeitung von Videosignalen nach Anspruch 4, dadurch gekennzeichnet, daß eine Signalverstärkung des analogen bzw. mehrwertigen Steuersignals (k) zur Ansteuerung des Videomischers vorgesehen ist.5. A device for processing video signals according to claim 4, characterized, that a signal amplification of the analog or multi-value control signal (k) for Control of the video mixer is provided. 6. Anordnung zur Störsignalbefreiung mittels adaptiver Medianfilterung die dazu vorgesehen ist, in als gestört und unbewegt klassifizierten Bildbereichen eine Fehler­ verdeckung vorzunehmen, wobei vorgesehen ist, durch Vergleich von Bildinhalten mindestens eines dem aktuellen Bild (N) vorangehenden Bildes (N-1) und mindes­ tens eines, dem aktuellen Bild (N) folgenden Bildes (N+1) ein Bewegungssignal (Wmot) zur Kennzeichnung von bewegten Bildbereichen (Ay) zu erzeugen dadurch gekennzeichnet, daß die Anordnung zur Störsignalbefreiung dazu vorgesehen ist, das Bewegungs­ signal (Wmot) mit einem Maskierungssignal (WD) zu maskieren, wobei das Maskie­ rungssignal den Beginn und das Ende eines bewegten Objekts (Ay) im aktuellen Bild (N) angibt. 6. Arrangement for interference signal elimination by means of adaptive median filtering, which is intended to make an error concealment in image areas classified as disturbed and unmoved, it being provided by comparing image contents of at least one image (N-1) preceding the current image (N) and at least one to generate at least one image (N + 1) following the current image (N) a motion signal (W mot ) for identifying moving image areas (A y ), characterized in that the arrangement for releasing the interference signal is provided for the motion signal (W mot ) with a masking signal (W D ), the masking signal indicating the beginning and the end of a moving object (A y ) in the current image (N). 7. Anordnung zur Störsignalbefreiung von Videosignalen nach Anspruch 6, dadurch gekennzeichnet, daß die Anordnung zur Störstellenbefreiung dazu vorgesehen ist, die Klassifizierung von weißen Störstellen und schwarzen Störstellen in getrennten Signalzweigen vorzunehmen.7. Arrangement for interference signal exemption from video signals according to claim 6, characterized, that the arrangement for removing impurities is provided for the classification of white impurities and black impurities in separate signal branches to make. 8. Anordnung zur Störsignalbefreiung von Videosignalen nach Anspruch 6 oder 7, dadurch gekennzeichnet, daß die Anordnung zu Störsignalbefreiung dazu vorgesehen ist zur Fehlerverdeckung eine Überblendung zwischen aktuellen Bild (N) und median-gefilterten Bild (N*) vorzunehmen.8. Arrangement for interference signal exemption from video signals according to claim 6 or 7, characterized, that the arrangement for interference signal release is provided for error concealment a transition between current image (N) and median-filtered image (N *) to make. 9. Anordnung zur Störsignalbefreiung von Videosignalen nach Anspruch 7 oder 8, dadurch gekennzeichnet, daß die Anordnung zur Störsignalbefreiung dazu vorgesehen ist, ein analoges, bzw. mindestens mehrwertiges Steuersignal (k) zur Ansteuerung einer Videomischstufe zu erzeugen, deren einem Videosignaleingang das Videosignal (Y) des aktuellen Bildes und deren anderem Videosignaleingang das Videosignal (Y*) des median- gefilterten Bildes (N*) zugeführt ist.9. Arrangement for interference signal exemption from video signals according to claim 7 or 8, characterized, that the arrangement for interference signal exemption is provided for an analog or at least multi-value control signal (k) for controlling a video mixer to generate one video signal input of the video signal (Y) of the current Image and their other video signal input the video signal (Y *) of the median filtered image (N *) is supplied. 10. Anordnung zur Störsignalbefreiung von Videosignalen nach Anspruch 9, dadurch gekennzeichnet, daß eine Signalverstärkung des analogen bzw. mehrwertigen Steuersignals (k) zur Ansteuerung der Videomischstufe vorgesehen ist.10. Arrangement for interference signal exemption from video signals according to claim 9, characterized, that a signal amplification of the analog or multi-value control signal (k) for Control of the video mixing stage is provided. 11. Verfahren zur Störsignalbefreiung mittels adaptiver Medianfilterung, bei dem vorgesehen ist, in als gestört und unbewegt klassifizierten Bildbereichen eine Fehlerverdeckung vorzunehmen, wobei vorgesehen ist durch Vergleich von Bildinhalten mindestens eines dem aktuellen Bild (N) vorangehenden Bildes (N-1) und mindestens eines, dem aktuellen Bild (N) folgenden Bildes (N+1) bewegte Bildbereichen (Ay) zu kennzeichnen dadurch gekennzeichnet, daß vorgesehen ist, eine Maske zu erzeugen, deren Maskenfläche der Bildfläche des bewegten Objekts im aktuellen Bild entspricht und mittels dieser Maske aus dem gekennzeichneten bewegten Bildbereich jenen Bildbereich herauszustanzen, für den das median-gefilterte Videobild als Ersatzbild genommen wird.11.Method for interference signal elimination by means of adaptive median filtering, in which it is provided that error coverage is performed in image areas classified as disturbed and unmoved, wherein at least one image (N-1) preceding the current image (N) and at least one is provided by comparing image contents To characterize moving image areas (A y ) following the current image (N) (N + 1), characterized in that it is provided to generate a mask whose mask surface corresponds to the image surface of the moving object in the current image and by means of this mask punch out the image area for which the median-filtered video image is taken as a replacement image. 12. Anordnung zur Störsignalbefreiung von Videosignalen nach Anspruch 11, dadurch gekennzeichnet, daß vorgesehen ist, die Klassifizierung von weißen Störstellen und schwarzen Störstellen in getrennten Verfahrensschritten vorzunehmen.12. Arrangement for interference signal exemption from video signals according to claim 11, characterized, that is intended to classify white impurities and black To carry out defects in separate procedural steps. 13. Verfahren zur Störsignalbefreiung von Videosignalen nach Anspruch 11 oder 12, dadurch gekennzeichnet, daß zur Fehlerverdeckung zwischen aktuellen Bild (N) und median-gefilterten Bild (N*) eine Überblendung vorgesehen wird.13. A method for eliminating interference signals from video signals according to claim 11 or 12, characterized, that to hide the error between the current image (N) and median-filtered image (N *) a transition is provided. 14. Verfahren zur Störsignalbefreiung von Videosignalen nach Anspruch 12 oder 13, dadurch gekennzeichnet, daß zur Steuerung des Überblendvorgangs zwischen aktuellen Bild (N) und median- gefiltertem Bild (N*) vorgesehen ist, ein analoges bzw. mehr als dreiwertigen Steuersignal zu erzeugen.14. A method for eliminating interference signals from video signals according to claim 12 or 13, characterized, that to control the blending process between the current image (N) and median filtered image (N *) is provided, an analog or more than three-valued Generate control signal. 15. Verfahren zur Störsignalbefreiung von Videosignalen nach Anspruch 14, dadurch gekennzeichnet, daß das analoge bzw. mehrwertigen Steuersignale (k) zur Ansteuerung einer Videomischstufe vorgesehen ist.15. A method for eliminating interference signals from video signals according to claim 14, characterized, that the analog or multi-value control signals (k) for controlling a Video mixing stage is provided.
DE19636867A 1996-09-11 1996-09-11 Video signal processing apparatus for noise signal removal Expired - Fee Related DE19636867C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE19636867A DE19636867C1 (en) 1996-09-11 1996-09-11 Video signal processing apparatus for noise signal removal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE19636867A DE19636867C1 (en) 1996-09-11 1996-09-11 Video signal processing apparatus for noise signal removal

Publications (1)

Publication Number Publication Date
DE19636867C1 true DE19636867C1 (en) 1998-01-02

Family

ID=7805229

Family Applications (1)

Application Number Title Priority Date Filing Date
DE19636867A Expired - Fee Related DE19636867C1 (en) 1996-09-11 1996-09-11 Video signal processing apparatus for noise signal removal

Country Status (1)

Country Link
DE (1) DE19636867C1 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000027129A1 (en) * 1998-11-02 2000-05-11 Nokia Mobile Phones Limited Error concealment in a video signal
WO2001048694A1 (en) * 1999-12-29 2001-07-05 Applied Science Fiction, Inc. Method and apparatus to provide interactive image correction for heavily damaged images
WO2002052838A1 (en) * 2000-12-23 2002-07-04 Bts Holding International Bv Method for processing video signals
US6437358B1 (en) 1999-02-04 2002-08-20 Applied Science Fiction, Inc. Apparatus and methods for capturing defect data
FR2829604A1 (en) * 2001-09-12 2003-03-14 Eastman Kodak Co INTERACTIVE DATA SELECTION IN DIGITAL IMAGES
EP1383310A2 (en) * 2002-07-16 2004-01-21 Broadcom Corporation Adaptive non-linear noise reduction techniques
EP1383311A1 (en) * 2002-07-16 2004-01-21 Broadcom Corporation Digital noise reduction techniques
US6711302B1 (en) 1999-10-20 2004-03-23 Eastman Kodak Company Method and system for altering defects in digital image
US6720560B1 (en) 1999-12-30 2004-04-13 Eastman Kodak Company Method and apparatus for scanning images
US6750435B2 (en) 2000-09-22 2004-06-15 Eastman Kodak Company Lens focusing device, system and method for use with multiple light wavelengths
US6862117B1 (en) 1999-12-30 2005-03-01 Eastman Kodak Company Method and apparatus for reducing the effect of bleed-through on captured images
US6924911B1 (en) 1999-10-12 2005-08-02 Eastman Kodak Company Method and system for multi-sensor signal detection
US6987892B2 (en) 2001-04-19 2006-01-17 Eastman Kodak Company Method, system and software for correcting image defects
US7164511B2 (en) 1999-12-29 2007-01-16 Eastman Kodak Company Distinguishing positive and negative films system and method
US7760271B2 (en) 2002-02-26 2010-07-20 Thomson Licensing Method and circuit for determining the noise component in a video signal

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0488498A1 (en) * 1990-11-27 1992-06-03 Samsung Electronics Co., Ltd. Motion signal detecting circuit
DE4343095A1 (en) * 1993-12-17 1995-06-22 Philips Patentverwaltung Method and circuit for eliminating interference signals from video signals

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0488498A1 (en) * 1990-11-27 1992-06-03 Samsung Electronics Co., Ltd. Motion signal detecting circuit
DE4343095A1 (en) * 1993-12-17 1995-06-22 Philips Patentverwaltung Method and circuit for eliminating interference signals from video signals

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000027129A1 (en) * 1998-11-02 2000-05-11 Nokia Mobile Phones Limited Error concealment in a video signal
US6437358B1 (en) 1999-02-04 2002-08-20 Applied Science Fiction, Inc. Apparatus and methods for capturing defect data
US6924911B1 (en) 1999-10-12 2005-08-02 Eastman Kodak Company Method and system for multi-sensor signal detection
US6711302B1 (en) 1999-10-20 2004-03-23 Eastman Kodak Company Method and system for altering defects in digital image
WO2001048694A1 (en) * 1999-12-29 2001-07-05 Applied Science Fiction, Inc. Method and apparatus to provide interactive image correction for heavily damaged images
US7164511B2 (en) 1999-12-29 2007-01-16 Eastman Kodak Company Distinguishing positive and negative films system and method
US6704458B2 (en) 1999-12-29 2004-03-09 Eastman Kodak Company Method and apparatus for correcting heavily damaged images
US6862117B1 (en) 1999-12-30 2005-03-01 Eastman Kodak Company Method and apparatus for reducing the effect of bleed-through on captured images
US6720560B1 (en) 1999-12-30 2004-04-13 Eastman Kodak Company Method and apparatus for scanning images
US6750435B2 (en) 2000-09-22 2004-06-15 Eastman Kodak Company Lens focusing device, system and method for use with multiple light wavelengths
WO2002052838A1 (en) * 2000-12-23 2002-07-04 Bts Holding International Bv Method for processing video signals
US6987892B2 (en) 2001-04-19 2006-01-17 Eastman Kodak Company Method, system and software for correcting image defects
EP1293932A1 (en) * 2001-09-12 2003-03-19 Eastman Kodak Company Interactive selection of data in digital images
FR2829604A1 (en) * 2001-09-12 2003-03-14 Eastman Kodak Co INTERACTIVE DATA SELECTION IN DIGITAL IMAGES
US7760271B2 (en) 2002-02-26 2010-07-20 Thomson Licensing Method and circuit for determining the noise component in a video signal
EP1383310A3 (en) * 2002-07-16 2004-06-16 Broadcom Corporation Adaptive non-linear noise reduction techniques
EP1383311A1 (en) * 2002-07-16 2004-01-21 Broadcom Corporation Digital noise reduction techniques
US6958783B2 (en) 2002-07-16 2005-10-25 Broadcom Corporation Adaptive non-linear noise reduction techniques
EP1383310A2 (en) * 2002-07-16 2004-01-21 Broadcom Corporation Adaptive non-linear noise reduction techniques
US7050501B2 (en) 2002-07-16 2006-05-23 Broadcom Corporation Digital noise reduction techniques
US7158189B2 (en) 2002-07-16 2007-01-02 Broadcom Corporation Adaptive non-linear noise reduction techniques

Similar Documents

Publication Publication Date Title
DE19636867C1 (en) Video signal processing apparatus for noise signal removal
DE3709068C2 (en) Arrangement for adaptive median filtering
DE4121727C2 (en) Motion signal processor
DE602004005358T2 (en) OBJECT DETECTION IN PICTURES
DE3609887C2 (en) Circuit arrangement for generating design factors for a recursive filter for video signals
EP0472239B1 (en) Method for evaluating horizontal movements in picture content of a television signal
DE3114275C2 (en)
EP0702487A1 (en) Method and circuit for detecting and concealing errors in a video signal
DE4343095C2 (en) Method and circuit for eliminating interference signals from video signals
DE3010813A1 (en) VIDEO DETECTOR ARRANGEMENT AND METHOD FOR DETECTING IMAGE MOVEMENTS AND / OR NOISE IN A VIDEO SIGNAL
DE3942273A1 (en) METHOD FOR HIDDEN ERRORS IN A VIDEO SIGNAL
DE112014005160T5 (en) A method for detecting a hidden state of a camera, camera system and motor vehicle
DE4013474C2 (en) Arrangement for reducing noise in a video signal
DE4319342A1 (en) Method for reducing interference (noise, disturbances)
DE3622204C2 (en) Recursive filter to reduce noise in a composite video signal
DE69635259T2 (en) Masking of stains in video signals
DE4340687C2 (en) Device and method for improving the settling edge of a video signal
EP1587319B1 (en) Method and apparatus for interpolating a pixel of an intermediate line of a half-picture
DE102010014733B4 (en) Chromakey method and chromakey device for taking and editing camera images
DE4137404A1 (en) METHOD FOR REDUCING NOISE
DE19636865C1 (en) Processing device for detecting inclined scratches in video signals from film scanner
EP0333069B1 (en) Device and method for discriminating movement in a video signal
EP0568911A2 (en) Device for transmitting colour television signals including a luminance signal and at least one of the associated colour signals
EP0639922B1 (en) Motion detection circuit for picture signal
DE10011060B4 (en) noise reducer

Legal Events

Date Code Title Description
8100 Publication of the examined application without publication of unexamined application
D1 Grant (no unexamined application published) patent law 81
8364 No opposition during term of opposition
8327 Change in the person/name/address of the patent owner

Owner name: PHILIPS CORPORATE INTELLECTUAL PROPERTY GMBH, 2233

8327 Change in the person/name/address of the patent owner

Owner name: BTS HOLDING INTERNATIONAL BV, BREDA, NL

8328 Change in the person/name/address of the agent

Representative=s name: ROSSMANITH, M., DIPL.-PHYS. DR.RER.NAT., PAT.-ANW.

R081 Change of applicant/patentee

Owner name: DFT DIGITAL FILM TECHNOLOGY HOLDING GMBH, DE

Free format text: FORMER OWNER: BTS HOLDING INTERNATIONAL B.V., BREDA, NL

Effective date: 20110824

R082 Change of representative

Representative=s name: KOENIG SZYNKA TILMANN VON RENESSE PATENTANWAEL, DE

Effective date: 20110824

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

Effective date: 20120403