EP1317848A2 - Device and method for reproducing photographic sound recordings - Google Patents

Device and method for reproducing photographic sound recordings

Info

Publication number
EP1317848A2
EP1317848A2 EP01983447A EP01983447A EP1317848A2 EP 1317848 A2 EP1317848 A2 EP 1317848A2 EP 01983447 A EP01983447 A EP 01983447A EP 01983447 A EP01983447 A EP 01983447A EP 1317848 A2 EP1317848 A2 EP 1317848A2
Authority
EP
European Patent Office
Prior art keywords
data
double
pixels
edge
program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP01983447A
Other languages
German (de)
French (fr)
Inventor
Dieter Poetsch
Detlef Richter
Jochen Huegel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BTS Holding International BV
Original Assignee
BTS Holding International BV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BTS Holding International BV filed Critical BTS Holding International BV
Publication of EP1317848A2 publication Critical patent/EP1317848A2/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B7/00Recording or reproducing by optical means, e.g. recording using a thermal beam of optical radiation by modifying optical properties or the physical structure, reproducing using an optical beam at lower power by sensing optical properties; Record carriers therefor
    • G11B7/002Recording, reproducing or erasing systems characterised by the shape or form of the carrier
    • G11B7/003Recording, reproducing or erasing systems characterised by the shape or form of the carrier with webs, filaments or wires, e.g. belts, spooled tapes or films of quasi-infinite extent
    • G11B7/0032Recording, reproducing or erasing systems characterised by the shape or form of the carrier with webs, filaments or wires, e.g. belts, spooled tapes or films of quasi-infinite extent for moving-picture soundtracks, i.e. cinema
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B31/00Associated working of cameras or projectors with sound-recording or sound-reproducing means
    • G03B31/06Associated working of cameras or projectors with sound-recording or sound-reproducing means in which sound track is associated with successively-shown still pictures

Definitions

  • the invention relates to a device for reproducing light sound recordings, which has an optoelectronic converter device for optically scanning a light sound track, which outputs a digital image signal of the scanned light sound track at an output, and which contains a device for intermediate storage of the image signal output by the converter device. Furthermore, the invention relates to a method for reproducing light sound recordings, in particular light sound recordings, in which the sound information is recorded on film as double-pointed writing.
  • the sound information is recorded on a light sound track that lies between the picture information and perforation holes on the side.
  • the film is transported at a speed of 24 frames per second to reproduce the sound information.
  • a light beam illuminates the light sound track during film transport.
  • the light beam is modulated by differences in transparency of the scanned light sound track and directed onto a light-sensitive sensor.
  • the analog sound signal emitted by the light-sensitive sensor is amplified for loudspeaker reproduction.
  • Older, commonly used films often show two types of defects: one is dirt and dust on the surface of the film; the other type involves scratches in the running direction of the film, so-called running scratches, which are caused by mechanical contact of the film guide elements with the film surface.
  • Traces of light are particularly sensitive to interference from dirt and scratches, the number of which increases with the number of times the film copy is projected. Distortion of hissing sounds in the language, a so-called thunder effect, can arise from the scattered light effects of the serrated writing.
  • the image part is now copied onto a new film carrier and the light sound track is transferred to a magnetic film in a single track to prevent the often scratched and partly disturbed sound tracks from being transferred to the new film carrier by optical copying of the light sound tracks.
  • sound post-processing with electronic filters and manual processing attempt to remove crackling and pattering noises from the original sound.
  • DE 19729 201 A1 describes a film scanner with a device for scanning light sound tracks on a band-shaped carrier, in which the sound information is scanned perpendicular to the direction of movement of the carrier with an opto / electronic converter device.
  • the opto / electronic converter device scans the sound information line by line in order to generate samples for digital two-dimensional filtering.
  • the light sound tracks can be scanned with a CCD line sensor or with a light spot directed across the sound tracks to control a photo sensor.
  • the present invention has for its object to provide a device and a method for reproducing light sound recordings according to the type mentioned, which (s) enables the elimination of interference.
  • a device for program-controlled data processing of the temporarily stored image signal which device first determines the course of edges of a serrated font from data values of the image signal and which then generates audio data for sound reproduction from data of the determined edge course.
  • the invention has the advantage that the digital image signal generated by scanning a light sound track can be examined by means of digital image processing. Sound information that has been recorded as single, double or multiple jagged characters on the soundtrack of a film can now be subjected to error concealment and / or error correction in advance - before the sound information is available as useful information - whereby not the sound information itself, but the image information on the audio track is examined and error-concealed and / or error-corrected.
  • the data values of pixels of the temporarily stored image signal representing brightness values are subjected to filtering under program control over the duration of several lines.
  • Brightness values of the pixels can be set according to a specified function, e.g. change after a linear or a non-linear transfer function. Very bright pixels can be filtered out or light and dark
  • Pixels can be compressed in the brightness range.
  • the filtering can be used to tax the jumps in brightness at the light tone edges of a serrated font.
  • the dynamic range is optimized by a standardization filter. By checking a number of lines, the data values for black (maximum film density) are corrected to 0% and the data values for white (minimum film density) to 100% of the brightness value range.
  • the width of the transparent surface on the light soundtrack of a film is proportional to the modulation amplitude of the recorded sound signal.
  • the position of edge boundaries running transversely to the longitudinal direction of the film is program-controlled based on the position of brightness jumps in the line profile by evaluating the data values representing the brightness values Pixels are determined that in a second step a track center running between the determined edge boundaries is calculated and that in a third step the temporarily stored pixel data is mirrored at the calculated track center, so that pixel data of a single-point font is created.
  • the symmetry property of double-point writing is advantageously used here.
  • the program of a data processing device is designed in such a way that when evaluating pixel data of a double-point font, the position area of the middle of the track is limited by setting an upper and lower threshold.
  • the course of the determined edge boundaries and / or the course of the track center is smoothed according to a predetermined function.
  • a program of the data processing device contains at least one test routine for the detection of errors in a double point font.
  • a simple test routine consists in the fact that an exceeding of the upper and / or lower threshold of the position range of the determined middle of the track is evaluated as an error in the edge course of the double-point writing.
  • Another test routine provides that exceeding a certain limit in the edge course of the double-point script is evaluated as an error in the edge course of the double-point script.
  • the program of the data processing device has at least one routine for covering errors in a double-pointed lettering.
  • the program is designed in such a way that a pixel value identified as faulty is replaced by the pixel value of a previous line. If the two edge pixels cannot be found within a line due to image errors, the pixel values of the previous line should serve as substitute pixels.
  • Another advantageous solution is to create the program of the data processing device in such a way that data values of incorrectly recognized pixels between the edge boundaries of the double-point font are replaced by predetermined data values, for example by data values that correspond to black pixels. The data values of incorrectly recognized pixels which are located outside the edge boundaries of the double-point writing are to be replaced by data values which correspond to a gray pixel.
  • the strong cracking noise that can be heard at glue points and the sound dropouts that can be heard in clay flies can be mitigated.
  • N is the number of undisturbed lines to be used for the restoration
  • a further development of the invention consists of a method for reproducing light tone recordings, in which a digital image signal is generated by scanning a light tone track, in which data of the generated image signal are temporarily stored, in which, depending on the values of the temporarily stored data, an edge profile of a serrated writing recorded on the light tone track is determined and at which, depending on the determined edge profile, corresponding audio data for a sound reproduction are derived.
  • 1 is an optical scanning device for light sound tracks and a block diagram for processing image data of the scanned light sound tracks according to the invention
  • FIG. 2 shows the schematic representation of a 35 mm cinema film
  • FIG. 3 shows the enlarged representation of a light sound track in double-pointed script
  • FIG. 4 shows a flowchart for image processing of light sound information in double-pointed script
  • Fig. 1 denotes an illumination source.
  • the light from the illumination source 1 radiates via a first condenser 2 onto a light sound track 3 of a film 4.
  • the light sound track 3 has a track width of 2.5 mm.
  • the light sound track 3 lies on one side between 22 mm wide film picture windows 5 and a first perforation track 6.
  • a second perforation track 7 runs on the other side of the film picture windows 5.
  • the perforation tracks 6 and 7 are provided for film transport; they have perforation holes P.
  • the picture height of a 35 mm film is 16 mm; the image position is 19 mm.
  • the film picture windows 5 are separated in the longitudinal direction of the film 4 by lines 7.
  • Fig. 3 a section of the light sound track 3 is shown enlarged. It is assumed that the light sound track 3 is a light sound information
  • Double-point script DZ with pure tone aperture RB.
  • the double-point script DZ extends in the longitudinal direction of the film 4 as a blackened trace.
  • the width of the clear surface is proportional to the modulation amplitude of a recorded audio signal in the case of the double-point font DZ.
  • the film is transported by means of two toothed rollers 9 and 10 which engage in perforation holes P in the perforation tracks 6 and 7 running to the side of the film 4.
  • the toothed rollers 9 and 10 are operatively connected to motors (not shown), the speed of which is regulated by a film transport servo 11.
  • a second condenser 12 is arranged on the opposite side of the film 4 and directs a light beam modulated by the light sound track 3 onto a line camera 13.
  • the line camera 13 contains a CCD line sensor with 512 image sensors.
  • the line camera 13 outputs an RS-422 data signal with a word length of 8 bits per pixel.
  • the RS-422 data signal of the light track 3 passes through a Data input 14 to a program-controlled data processing device 15.
  • the data processing device 15 contains a frame grabber 16, the input of which is connected to the data input 14 of the data processing device 15.
  • An output of the frame grabber 16 is connected to a bus system 17.
  • Connected to the bus system 17 are also: a CPU 18, a memory 19 for program and data storage, an interface 20 with a terminal 21 for the transmission of servo data from and to the film transport servo 11, a video output device 22 with an output terminal 23 for the transmission of a video signal to a monitor 24 and an audio output device 25 with an output terminal 26 for transmitting an audio signal to a loudspeaker 27.
  • the frame grabber 16 prepares a serial image data sequence of the light sound tracks 3 generated by the line camera 16, stores them temporarily and forwards them in a resolution of 8 bits via the bus system 17 to the memory 19, in which the image data are stored in a RAW file format ,
  • the frame grabber 16 has an output 28 for synchronizing the line camera 13.
  • the sampling frequency can be reduced from 24 frames per second to 6 frames. If the light sound track 3 is scanned with 2000 lines per film frame, a Nyquist frequency of 24 kHz is obtained with a film transport speed reduced to 6 frames. In this case, a quantity of data of 24 Mbytes must be written into the memory 19 per second.
  • the amount of data supplied by the frame grabber 16 is comparatively large.
  • the image data of the light sound track 3 are therefore written into a mass memory, for example into a disk memory of the memory 19.
  • the application programs for processing the data of the light sound track 3 and for regulating the film transport are stored in RAM and ROM memories of the memory 19.
  • the video output device 22 is Provided, which converts the digital image data of the scanned light sound track 3 into an analog video signal for display on the monitor 24.
  • an analog video signal can also be tapped directly from the output of the line camera 13 and fed to the monitor 24.
  • the audio output device 25 is used for monitoring monitoring.
  • the image data of the double-point font DZ available in the RAW file format are converted into an audio file format, e.g. a WAV file format.
  • the film transport servo 11 which controls the motors of the toothed rollers 9 and 10 is regulated by data which the data processing device 15 derives in a program-controlled manner on the basis of the image data signal generated by the line camera 13.
  • the interface 20 is designed for a bidirectional transmission of data between the film transport servo 11 and the bus system 17, so that an exchange of target and actual data values via the speeds of the toothed rollers 8 and 9 is possible.
  • the pixel data of the light track 3 temporarily stored in the memory 19 are first to be subjected to a fixed pattern noise (FPN) correction. Details of this correction can be found in the older German patent application P 10044 978.6.
  • FPN fixed pattern noise
  • the brightness range of the digital image signal generated by scanning the light sound track 3 is to be optimized.
  • data values representing the brightness values of the temporarily stored pixels of several lines are program-controlled subjected to either a linear or a non-linear filtering.
  • the brightness values of the pixels are changed in such a way that a faulty image signal of the double-point font, generated by changing film densities or changing lighting, only has image components with constant black and constant white.
  • the data values of the temporarily stored pixels of the image signal generated by scanning the light sound track 3 are advantageously multiplied by a normalization factor.
  • the normalization factor is calculated according to the equation:
  • the brightness value used in the equation is the average maximum brightness value of the first 2000 lines in the image signal.
  • the light value is determined by determining the lightest value in 2000 lines.
  • a mean value is formed from the 2000 brightness values determined.
  • the new, changed brightness value of pixels is calculated according to the equation:
  • Pixel (new) pixel (old) * standard factor
  • the non-linear filter changes the brightness values of the pixels according to the following equation:
  • the double-sided edge course of a double-point writing determines the frequency and the amplitude of the recorded sound information.
  • the edge does not consist of an abrupt jump in brightness, but rather a steady transition from light to dark or vice versa.
  • the length of the edge is not constant; it varies with the frequency and amplitude of the sound information.
  • the brightness transition of an edge can encompass a range between 8 and 40 pixels.
  • a characteristic of the exact position of the left and right edges of the double-point font DZ is the presence of a medium gray value in the sequence of pixels.
  • the mean gray value would correspond to the center of the flank in one brightness.
  • the value of the mean gray value can be calculated line by line as follows:
  • White value white value +20 ⁇ number (g) * g _number (g) s ⁇ white value - 20 g -white value -20 where g corresponds to the gray value. 1 black level +20
  • the white value or black value being a value found in a histogram.
  • Pix n corresponds to the data value of a pixel at position n within a line.
  • a supplementary check is carried out to determine whether the edge is continuous over a range of +/- 2 pixels. If this is the case, an edge pixel and thus the pixel-precise position of an edge within a scan line has been found.
  • the center of the double-point writing is calculated line by line using the two edges.
  • edges are first calculated with sub-pixel accuracy according to the invention.
  • the exact gray value is searched for around the previously found edge pixels.
  • the new pixel location is the sub-pixel exact position of an edge.
  • the right edge is calculated with sub-pixel accuracy.
  • an ideal center is subsequently calculated.
  • the ideal center is averaged over 50 lines, whereby lines that deviate from this ideal center by a certain value ("ERROR") are not included. In this case, an error is detected in this line.
  • FIG. 5 shows an enlarged detail of the light sound track 3 with image-processed (black) double-point writing DZ.
  • the cutout shows the ideal center M - stretched by a factor of 10 - together with the double-point script DZ.
  • the ideal center M is drawn as a fixed center line.
  • Two further center lines Mi and M r are +/- 1 pixels from the center M; the other center lines Mi and M r advantageously serve as an evaluation aid.
  • the black double-point font DZ with pure tone aperture RB is delimited on the left and right by an edge.
  • a double point font has symmetry properties.
  • the two edges of the double-point font are symmetrical to each other.
  • the property can be used advantageously for restoration by using the serrated writing in the middle is mirrored.
  • the result is a single-point writing, in which image errors due to scratches and stains are only half the intensity of the brightness.
  • edge of the double-point font is not found within a line or if a recognized edge is obviously incorrect, the edge of the opposite side is used to determine the edge position instead of the edge which was not found or which is incorrect.
  • the position of the other edge can be calculated using the following equation, for example:
  • PositionNewEdge 2 »Ideal ⁇ Mitte - opposite edge
  • a faulty edge position is recognized when the determined center of the double-point writing deviates from the ideal center by a certain value specified by the user.
  • pixels identified as defective which lie outside the edges of the double-point writing are replaced by replacement pixels which have a specific predetermined gray value.
  • the edge end of the double point font should be defined. It should be defined that that
  • Edge end must have a fixed distance from the center of the edge, for example a distance between 5 and 15 pixels. Another definition could stipulate that, starting from the center of the edge, the search is made for the pixel at which the brightness remains the same to the next pixel or decreases again.
  • FIG. 4 shows a flowchart of the measures described above for processing a double-point font, which is performed by scanning a light sound track 3 generated and stored in the memory 19 as a pixel file with pixel data of 2000 lines each.
  • the file with the pixel data of the scanned light sound track 3 stored in the memory 19 is accessed at 40.
  • the pixel data are examined at 41 to determine whether the two lateral boundaries (edges) of a double-point font DZ can be found. If it is determined at 42 that there is only a single edge, the determined edge is mirrored at 43 on the other side. If, on the other hand, it is determined at 44 that no edge was found, the edge of the front line is used at 45 for further processing. If both edges are present, the center of the double-point script DZ can be calculated at 46.
  • step 47 it is checked whether the calculated center deviates significantly from an ideal center. If this is the case, it is further checked at 48 whether there is an error. In the opposite case, the ideal center is calculated at 49.
  • Double-point font DZ a faulty edge is recalculated at 50. If, however, the error lies outside of the course of the double-point script DZ, the faulty edge is recalculated at 51 according to an appropriately adapted algorithm. Subsequently, the center and the edges of the double-point font DZ are drawn at 52 and a file is created at 53, which
  • the image data now processed in a RAW file format must be converted into audio data in a WAV file format.
  • the transformation is known per se.
  • the data values of all pixels of each line are summed line by line, then averaged and then converted into an audio data word.
  • the data sequence of the audio data words generated line by line is transformed into the WAV file format.
  • the WAV file of the recorded light sound information thus generated can be decoded via the sound card of a PC and converted into analog sound information for radiation via the loudspeaker 24 D / A.
  • the invention was described using the example of a double-point script.
  • the use of the device according to the invention is not limited to the reproduction of light tone information in double-point writing.
  • the device according to the invention can also be used accordingly for reproducing light tone information which is present in single-point fonts or multiple-point fonts.
  • the device according to the invention can also be used for the reproduction of films which have been recorded in another film format, for example in a 16 mm film format.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optical Recording Or Reproduction (AREA)
  • Silver Salt Photography Or Processing Solution Therefor (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Image Processing (AREA)

Abstract

The invention relates to a device and a method for reproducing photographic sound information in double-edged variable-width track (DZ). An opto-electronic converter device (1, 2, 4, 9 to 13) scans the optical sound track (3) of a film (4). Said converter device (1, 2, 4, 9 to 13) produces a digital image signal for intermediate storage in the memory (19) of a program-controlled data processing device (15). Said data processing device (15) derives the course of the two edges of the double-edged variable-width track (DZ) from data values of the intermediately stored image signal. Audio data for reproducing sound are generated using data relating to the course of the edges that is determined.

Description

BESCHREIBUNGDESCRIPTION
Vorrichtung und Verfahren zur Wiedergabe von LichttonaufzeichnungenDevice and method for reproducing light sound recordings
Die Erfindung betrifft eine Vorrichtung zur Wiedergabe von Lichttonaufzeichnungen, welche eine opto-elektronische Wandlereinrichtung zur optischen Abtastung einer Lichttonspur aufweist, die an einem Ausgang ein digitales Bildsignal der abgetasteten Lichttonspur ausgibt, und welche eine Einrichtung zur Zwischenspeicherung des von der Wandlereinrichtuπg ausgegebenen Bildsignals enthält. Ferner betrifft die Erfindung ein Verfahren zur Wiedergabe von Lichttonaufzeichnungen, insbesondere Lichttonaufzeichnungen, bei welchen die Toninformation als Doppelzackenschrift auf Film aufgezeichnet ist.The invention relates to a device for reproducing light sound recordings, which has an optoelectronic converter device for optically scanning a light sound track, which outputs a digital image signal of the scanned light sound track at an output, and which contains a device for intermediate storage of the image signal output by the converter device. Furthermore, the invention relates to a method for reproducing light sound recordings, in particular light sound recordings, in which the sound information is recorded on film as double-pointed writing.
Bei 35-mm-Kinofilmen ist die Toninformation auf einer Lichttonspur aufgezeichnet, die zwischen Bildinformationen und seitlichen Perforationslöchern liegt. Zur Wiedergabe der Toninformation wird der Film mit einer Geschwindigkeit von 24 Bildern pro Sekunde transportiert. Während des Filmtransports beleuchtet ein Lichtstrahl die Lichttonspur. Der Lichtstrahl wird durch Transparenzunterschiede der abgetasteten Lichttonspur moduliert und auf einen lichtempfindlichen Sensor gelenkt. Für eine Lautsprecherwiedergabe wird das von dem lichtempfindlichen Sensor abgegebene analoge Tonsignal verstärkt.In 35 mm cinema films, the sound information is recorded on a light sound track that lies between the picture information and perforation holes on the side. The film is transported at a speed of 24 frames per second to reproduce the sound information. A light beam illuminates the light sound track during film transport. The light beam is modulated by differences in transparency of the scanned light sound track and directed onto a light-sensitive sensor. The analog sound signal emitted by the light-sensitive sensor is amplified for loudspeaker reproduction.
Es gibt unterschiedliche Lichttonspuren. Bei der sogenannten Sprossenschrift ist die Transparenz der Lichttonspur proportional zur aufgezeichneten Modulationsamplitude. Bei der sogenannten Doppelzackenschrift ist es die Breite der klaren Fläche proportional zur Modulationsamplitude des Tonsignals.There are different light sound tracks. In the so-called sprout script, the transparency of the light sound track is proportional to the recorded modulation amplitude. In so-called double-point writing, the width of the clear area is proportional to the modulation amplitude of the sound signal.
Ältere, häufig verwendete Filme zeigen oft zwei Fehlerarten: Bei der einen Art handelt es sich um Schmutz und Staub auf der Oberfläche des Films; bei der anderen Art um Kratzer in Laufrichtung des Filmes, sogenannte Laufschrammen, die verursacht werden durch mechanischen Kontakt der Filmführungselemente mit der Filmoberfläche. Lichttonspuren sind besonders empfindlich gegen Störungen durch Schmutz und Kratzer, deren Anzahl mit der Anzahl von Malen steigt, die die Filmkopie projiziert wird. Verzerrungen von Zischlauten der Sprache, ein sogenannter Donnereffekt, können durch Streulichteffekte der Zackenschrift entstehen.Older, commonly used films often show two types of defects: one is dirt and dust on the surface of the film; the other type involves scratches in the running direction of the film, so-called running scratches, which are caused by mechanical contact of the film guide elements with the film surface. Traces of light are particularly sensitive to interference from dirt and scratches, the number of which increases with the number of times the film copy is projected. Distortion of hissing sounds in the language, a so-called thunder effect, can arise from the scattered light effects of the serrated writing.
Zur Restaurierung von alten Kinofilmen wird heute der Bildteil auf einen neuen Filmträger kopiert und die Lichttonspur einspurig auf einen Magnetfilm übertragen, um zu verhindern, dass durch optisches Kopieren der Lichttonspuren die oft verschrammten und teilweise durch Schmutz gestörten Tonspuren auf den neuen Filmträger übertragen werden. Ferner wird durch Tonnachbearbeitung mit elektronischen Filtern und manueller Bearbeitung versucht, Knack- und Prasselgeräusche aus dem Orginalton zu entfernen.For the restoration of old cinema films, the image part is now copied onto a new film carrier and the light sound track is transferred to a magnetic film in a single track to prevent the often scratched and partly disturbed sound tracks from being transferred to the new film carrier by optical copying of the light sound tracks. In addition, sound post-processing with electronic filters and manual processing attempt to remove crackling and pattering noises from the original sound.
In der DE 19729 201 A1 ist bereits ein Filmabtaster mit einer Einrichtung zur Abtastung von Lichttonspuren auf einem bandförmigen Träger beschrieben, bei welchem die Toninformation senkrecht zur Bewegungsrichtung des Trägers mit einer opto/elektronischen Wandlereinrichtung abgetastet wird. Die opto/elektronische Wandlereinrichtung tastet die Toninformation zeilenweise ab, um Abtastwerte für eine digitale zweidimensionale Filterung zu erzeugen. Die Lichttonspuren können dabei mit einem CCD-Zeilensensor abgetastet werden oder mit einem quer über die Tonspuren gelenkten Lichtfleck zur Steuerung eines Fotosensors.DE 19729 201 A1 describes a film scanner with a device for scanning light sound tracks on a band-shaped carrier, in which the sound information is scanned perpendicular to the direction of movement of the carrier with an opto / electronic converter device. The opto / electronic converter device scans the sound information line by line in order to generate samples for digital two-dimensional filtering. The light sound tracks can be scanned with a CCD line sensor or with a light spot directed across the sound tracks to control a photo sensor.
Der vorliegenden Erfindung liegt die Aufgabe zugrunde, eine Vorrichtung und ein Verfahren zur Wiedergabe von Lichttonaufzeichnungen nach der eingangs Art zu schaffen, welche(s) die Beseitigung von Störungen ermöglicht.The present invention has for its object to provide a device and a method for reproducing light sound recordings according to the type mentioned, which (s) enables the elimination of interference.
Diese Aufgabe wird erfindungsgemäß gelöst durch eine Einrichtung zur programmgesteuerten Datenverarbeitung des zwischengespeicherten Bildsignals, welche Einrichtung zunächst von Datenwerten des Bildsignals den Verlauf von Kanten einer Zackenschrift ermittelt und welche sodann von Daten des ermittelten Kantenverlaufes Audiodaten für eine Tonwiedergabe erzeugt. Die Erfindung weist den Vorteil auf, dass das durch Abtasten einer Lichttonspur erzeugte digitale Bildsignal mit Mitteln einer digitalen Bildbearbeitung untersucht werden kann. Toninformationen, die als Einfach-, Doppel- oder Mehrfachzackenschrift auf der Tonspur eines Films aufgezeichnet wurden, können nunmehr im Vorfeld - bevor die Toninformation als Nutzinformation vorliegt -, einer Fehlerverdeckung und/oder einer Fehlerkorrektur unterworfen werden, wobei nicht die Toninformation an sich, sondern die Bildinformation auf der Tonspur untersucht und fehlerverdeckt und/oder fehlerkorrigiert wird.This object is achieved according to the invention by a device for program-controlled data processing of the temporarily stored image signal, which device first determines the course of edges of a serrated font from data values of the image signal and which then generates audio data for sound reproduction from data of the determined edge course. The invention has the advantage that the digital image signal generated by scanning a light sound track can be examined by means of digital image processing. Sound information that has been recorded as single, double or multiple jagged characters on the soundtrack of a film can now be subjected to error concealment and / or error correction in advance - before the sound information is available as useful information - whereby not the sound information itself, but the image information on the audio track is examined and error-concealed and / or error-corrected.
Bei einer Ausgestaltung der Erfindung ist vorgesehen, dass die Helligkeitswerte darstellenden Datenwerte von Bildpunkten des zwischengespeicherten Bildsignals programmgesteuert über die Dauer mehrerer Zeilen einer Filterung unterworfen werden. Helligkeitswerte der Bildpunkte lassen sich nach einer vorgegebenen Funktion, z.B. nach einer linearen oder einer nicht-linearen Übertragungsfunktion ändern. Sehr helle Bildpunkte können ausgefiltert bzw. helle und dunkleIn one embodiment of the invention, it is provided that the data values of pixels of the temporarily stored image signal representing brightness values are subjected to filtering under program control over the duration of several lines. Brightness values of the pixels can be set according to a specified function, e.g. change after a linear or a non-linear transfer function. Very bright pixels can be filtered out or light and dark
Bildpunkte können im Helligkeitsbereich verdichtet werden. Durch die Filterung lassen sich die Helligkeitsprünge an den Lichttonkanten einer Zackenschrift versteuern. Der Dynamikbereich wird durch ein Normierungsfilter optimiert. Durch Überprüfung einer Anzahl von Zeilen werden die Datenwerte für Schwarz (maximale Filmdichte) auf 0 % und die Datenwerte für Weiß (minimale Filmdichte) auf 100 % des Helligkeitswertebereiches korrigiert.Pixels can be compressed in the brightness range. The filtering can be used to tax the jumps in brightness at the light tone edges of a serrated font. The dynamic range is optimized by a standardization filter. By checking a number of lines, the data values for black (maximum film density) are corrected to 0% and the data values for white (minimum film density) to 100% of the brightness value range.
Bei der Zackenschrift ist die Breite der transparenten Fläche auf der Lichttonspur eines Films proportional zur Modulationsamplitude des aufgezeichneten Tonsignals. Für die Wiedergabe einer in Zackenschrift aufgezeichnetenWith serrated writing, the width of the transparent surface on the light soundtrack of a film is proportional to the modulation amplitude of the recorded sound signal. For the playback of a serrated
Toninformation ist es daher von entscheidender Bedeutung, den Verlauf der Begrenzung der transparenten Fläche, d.h. den Kantenverlauf der Zackenschrift, zu ermitteln.Sound information, it is therefore of crucial importance to determine the course of the boundary of the transparent surface, i.e. to determine the edge course of the serrated letters.
Bei einer vorteilhaften Ausgestaltung der Erfindung wird zur Ermittelung des Kantenverlaufs einer Doppelzackenschrift vorgeschlagen, dass in einem ersten Schritt programmgesteuert die Lage von quer zur Längsrichtung des Films verlaufenden Kantengrenzen anhand der Position von Helligkeitssprüngen im Zeilenverlauf durch Auswerten der Helligkeitswerte darstellende Datenwerte der Bildpunkte ermittelt wird, dass in einem zweiten Schritt eine zwischen den ermittelten Kantengrenzen verlaufende Spurmitte berechnet wird und dass in einem dritten Schritt die zwischengespeicherten Bildpunktdaten an der berechneten Spurmitte gespiegelt werden, so dass Bildpunktdaten einer Einzackenschrift entstehen. Dabei wird vorteilhaft die Symmetrieeigenschaft der Doppelzackenschrift genutzt.In an advantageous embodiment of the invention, in order to determine the edge profile of a double-point font, it is proposed that, in a first step, the position of edge boundaries running transversely to the longitudinal direction of the film is program-controlled based on the position of brightness jumps in the line profile by evaluating the data values representing the brightness values Pixels are determined that in a second step a track center running between the determined edge boundaries is calculated and that in a third step the temporarily stored pixel data is mirrored at the calculated track center, so that pixel data of a single-point font is created. The symmetry property of double-point writing is advantageously used here.
Gemäß einer Weiterbildung der Erfindung ist das Programm einer Datenverarbeitungseinrichtung so angelegt ist, dass beim Auswerten von Bildpunktdaten einer Doppelzackenschrift der Lagebereich der Spurmitte durch Setzen einer oberen und unteren Schwelle begrenzt wird. Bei einer anderen Weiterbildung wird der Verlauf ermittelter Kantengrenzen und/oder der Verlauf der Spurmitte nach einer vorgegebenen Funktion geglättet.According to a further development of the invention, the program of a data processing device is designed in such a way that when evaluating pixel data of a double-point font, the position area of the middle of the track is limited by setting an upper and lower threshold. In another development, the course of the determined edge boundaries and / or the course of the track center is smoothed according to a predetermined function.
Wie eingangs erwähnt, kann die auf der Tonspur eines Films aufgezeichnete Doppelzackenschrift Fehler aufweisen. Nach einer Ausgestaltung der Erfindung enthält ein Programm der Datenverarbeitungseinrichtung mindestens eine Prüfroutine zur Erkennung von Fehlern in einer Doppelzackenschrift. Eine einfache Prüfroutine besteht darin, dass ein Überschreiten der oberen und/oder unteren Schwelle des Lagebereichs der ermittelten Spurmitte als Fehler im Kantenverlauf der Doppelzackenschrift gewertet wird. Bei einer anderen Prüfroutine ist vorgesehen, dass das Überschreiten einer bestimmten Grenze im Kantenverlauf der Doppelzackenschrift als Fehler im Kantenverlauf der Doppelzackenschrift gewertet wird.As mentioned at the beginning, the double-point writing recorded on the soundtrack of a film can have errors. According to one embodiment of the invention, a program of the data processing device contains at least one test routine for the detection of errors in a double point font. A simple test routine consists in the fact that an exceeding of the upper and / or lower threshold of the position range of the determined middle of the track is evaluated as an error in the edge course of the double-point writing. Another test routine provides that exceeding a certain limit in the edge course of the double-point script is evaluated as an error in the edge course of the double-point script.
Um erkannte Fehler im Bild der untersuchten Doppelzackenschrift zu verdecken, weist das Programm der Datenverarbeitungseinrichtung mindestens eine Routine zur Verdeckung von Fehlern in einer Doppelzackenschrift auf. Das Programm ist dabei so gestaltet, dass ein als fehlerhaft erkannter Bildpunktwert durch den Bildpunktwert einer vorhergehenden Zeile ersetzt wird. Lassen sich innerhalb einer Zeile die beiden Kantenbildpunkte aufgrund von Bildfehlern nicht finden, sollten die Bildpunktwerte der vorhergehenden Zeile als Ersatzbildpunkte dienen. Eine andere vorteilhafte Lösung besteht darin, das Programm der Datenverarbeitungseinrichtung so anzulegen, dass Datenwerte von fehlerhaft erkannten Bildpunkten zwischen den Kantengrenzen der Doppelzackenschrift durch vorgegebene Datenwerte, beispielsweise durch Datenwerte, die schwarzen Bildpunkten entsprechen, ersetzt werden. Die Datenwerte von fehlerhaft erkannten Bildpunkten, die außerhalb der Kantengrenzen der Doppelzackenschrift angesiedelt sind, sind durch Datenwerte zu ersetzen, die einem grauen Bildpunkt entsprechen.In order to hide detected errors in the image of the double-pointed script examined, the program of the data processing device has at least one routine for covering errors in a double-pointed lettering. The program is designed in such a way that a pixel value identified as faulty is replaced by the pixel value of a previous line. If the two edge pixels cannot be found within a line due to image errors, the pixel values of the previous line should serve as substitute pixels. Another advantageous solution is to create the program of the data processing device in such a way that data values of incorrectly recognized pixels between the edge boundaries of the double-point font are replaced by predetermined data values, for example by data values that correspond to black pixels. The data values of incorrectly recognized pixels which are located outside the edge boundaries of the double-point writing are to be replaced by data values which correspond to a gray pixel.
Weiterhin ist vorteilt, das Programm der Datenverarbeitungseinrichtung so zu gestalten, dass beim Erkennen von Fehlern in Bildpunkten außerhalb der Kantengrenzen einer Doppelzackenschrift der Datenwert eines fehlerhaften Bildpunktes durch einen durch Autokorrelation ermittelten Datenwert ersetzt wird. Vollständig vernichtete Tonspurbereiche an Klebestellen im Film oder an Stellen, an denen sich auf dem Film sogenannte Tonfliegen befinden, können durchIt is also advantageous to design the program of the data processing device in such a way that when errors are detected in pixels outside the edge boundaries of a double-point font, the data value of a defective pixel is replaced by a data value determined by auto-correlation. Fully destroyed soundtrack areas at glue points in the film or at places where so-called clay flies are on the film can be caused by
Extrapolieren - zumindestens teilweise - regeneriert werden. Die an Klebestellen hörbaren starken Knackstörungen sowie die bei Tonfliegen hörbaren Tonaussetzer lassen sich mildern.Extrapolate - at least partially - be regenerated. The strong cracking noise that can be heard at glue points and the sound dropouts that can be heard in clay flies can be mitigated.
Fehlerhafte erkannte Bildpunkte in Teilstücken der Kantenverläufe sind vorteilhaft nach einer Autokorrelationsfunktion gemäß dem folgenden Algorithmus zu berechnen:Incorrectly recognized pixels in sections of the edge profiles can advantageously be calculated using an autocorrelation function in accordance with the following algorithm:
N- \N- \
Ovor(ή)z *ä g(y- i)*g(y- i-n) a(0) ι=0Before (ή) z * ä g (y- i) * g ( y- in) a (0) ι = 0
wobeiin which
9(y) e'n Grauwert, y eine Zeilennummer, ein laufender Index von 0 bis N-1 , • n eine Variable der Autokorrelationsfunktion mit n = 0 bis N-1 ,9 (y) e 'n gray value, y a line number, a running index from 0 to N-1, • n a variable of the autocorrelation function with n = 0 to N-1,
N die Anzahl der für die Restaurierung zu verwendenden ungestörten Zeilen ist,N is the number of undisturbed lines to be used for the restoration,
Sodann sind fehlerhafte Bildpunkte durch einen Grauwertbildpunkte zu ersetzen, deren Lage innerhalb einer Zeile folgender Funktion genügt: g(Z) = Z * * g(z - Pvor) + -^— * g(z + PnacU)Defective pixels are then to be replaced by a gray value pixels, the position of which within a line satisfies the following function: g ( Z ) = Z * * g (z - Pvor) + - ^ - * g (z + PnacU)
Z + l Z + lZ + l Z + l
wobei g(z) ein zu ersetzender Grauwert,where g (z) is a gray value to be replaced,
Z die Anzahl von zu ersetzenden Zeilen, z die Zeilennummer, 1 ≤ z≤ Z,Z the number of lines to be replaced, z the line number, 1 ≤ z≤ Z,
Pvor bzw. Pnach die Periodizitäten in Tonspuren vor bzw. nach einem erkanntenP before or P after the periodicities in sound tracks before or after a recognized one
Fehler bedeuten.Mean mistakes.
Eine Weiterbildung der Erfindung besteht aus einem Verfahren zur Wiedergabe von Lichttonaufzeichnungen, bei welchem durch Abtasten einer Lichttonspur ein digitales Bildsignal erzeugt wird, bei welchem Daten des erzeugten Bildsignals zwischengespeichert werden, bei welchem abhängig von Werten der zwischengespeicherten Daten ein Kantenverlauf einer auf der Lichttonspur aufgezeichneten Zackenschrift ermittelt wird und bei welchem abhängig vom ermittelten Kantenverlauf entsprechende Audiodaten für eine Tonwiedergabe abgeleitet werden.A further development of the invention consists of a method for reproducing light tone recordings, in which a digital image signal is generated by scanning a light tone track, in which data of the generated image signal are temporarily stored, in which, depending on the values of the temporarily stored data, an edge profile of a serrated writing recorded on the light tone track is determined and at which, depending on the determined edge profile, corresponding audio data for a sound reproduction are derived.
Die Erfindung wird nun anhand von in den Zeichnungen dargestellten Ausführungsbeispielen näher beschrieben und erläutert. Es zeigen:The invention will now be described and explained in more detail with reference to exemplary embodiments shown in the drawings. Show it:
Fig. 1 eine optische Abtasteinrichtung für Lichttonspuren sowie ein Blockschaltbild zur Verarbeitung von Bilddaten der abgetasteten Lichttonspuren gemäß der Erfindung,1 is an optical scanning device for light sound tracks and a block diagram for processing image data of the scanned light sound tracks according to the invention,
Fig. 2 die schematische Darstellung eines 35-mm-Kinofilms, Fig. 3 die vergrößerte Darstellung einer Lichttonspur in Doppelzackenschrift, Fig. 4 ein Flussdiagramm zur Bildbearbeitung von Lichttoninformationen in Doppelzackenschrift, Fig. 5 die vergrößerte Darstellung einer bildbearbeiteten Doppelzackenschrift.2 shows the schematic representation of a 35 mm cinema film, FIG. 3 shows the enlarged representation of a light sound track in double-pointed script, FIG. 4 shows a flowchart for image processing of light sound information in double-pointed script, FIG.
Gleiche Teile sind in der Figuren mit gleichen Bezugszeichen versehen. In der Fig. 1 bezeichnet 1 eine Beleuchtungsquelle. Das Licht der Beleuchtungsquelle 1 strahlt über einen ersten Kondensor 2 auf eine Lichttonspur 3 eines Films 4.Identical parts are provided with the same reference symbols in the figures. In Fig. 1, 1 denotes an illumination source. The light from the illumination source 1 radiates via a first condenser 2 onto a light sound track 3 of a film 4.
Die Fig. 2 zeigt die Position der Lichttonspur 3 auf einem 35-mm-Kinofilm 4. Bei dem 35-mm-Kinofilm weist die Lichttonspur 3 eine Spurbreite von 2,5 mm auf. Die Lichttonspur 3 liegt auf einer Seite zwischen 22 mm breiten Filmbildfenstern 5 und einer ersten Perforationsspur 6. Eine zweite Perforationsspur 7 verläuft auf der anderen Seite der Filmbildfenster 5. Die Perforationsspuren 6 und 7 sind zum Filmtransport vorgesehen; sie weisen Perforationslöcher P auf. Die Bildhöhe eines 35-mm-Kinofilms beträgt 16 mm; der Bildstand weist 19 mm auf. Die Filmbildfenster 5 sind in Längsrichtung des Films 4 durch Bildstriche 7 getrennt.2 shows the position of the light sound track 3 on a 35 mm cinema film 4. In the 35 mm cinema film, the light sound track 3 has a track width of 2.5 mm. The light sound track 3 lies on one side between 22 mm wide film picture windows 5 and a first perforation track 6. A second perforation track 7 runs on the other side of the film picture windows 5. The perforation tracks 6 and 7 are provided for film transport; they have perforation holes P. The picture height of a 35 mm film is 16 mm; the image position is 19 mm. The film picture windows 5 are separated in the longitudinal direction of the film 4 by lines 7.
In der Fig. 3 ist ein Ausschnitt der Lichttonspur 3 vergrößert dargestellt. Es sei angenommen, dass die Lichttonspur 3 als Lichttoninformation eineIn Fig. 3 a section of the light sound track 3 is shown enlarged. It is assumed that the light sound track 3 is a light sound information
Doppelzackenschrift DZ mit Reintonblende RB enthält. Die Doppelzackenschrift DZ erstreckt sich in Längsrichtung des Films 4 als geschwärzte Spur. Wie eingangs erwähnt, ist bei der Doppelzackenschrift DZ die Breite der klaren Fläche proportional zur Modulationsamplitude eines aufgezeichneten Tonsignals.Contains double-point script DZ with pure tone aperture RB. The double-point script DZ extends in the longitudinal direction of the film 4 as a blackened trace. As mentioned at the beginning, the width of the clear surface is proportional to the modulation amplitude of a recorded audio signal in the case of the double-point font DZ.
Der Filmtransport erfolgt durch zwei Zahnrollen 9 und 10, die in Perforationslöcher P der seitlich des Films 4 verlaufenden Perforationsspuren 6 und 7 greifen. Die Zahnrollen 9 und 10 stehen in Wirkverbindung mit Motoren (nicht dargestellt), deren Drehzahl von einem Filmtransportservo 11 geregelt wird. Die Transportgeschwindigkeit eines 35-mm-Kinofilms beträgt 24 Bilder pro Sekunde (= 45,6 cm/s).The film is transported by means of two toothed rollers 9 and 10 which engage in perforation holes P in the perforation tracks 6 and 7 running to the side of the film 4. The toothed rollers 9 and 10 are operatively connected to motors (not shown), the speed of which is regulated by a film transport servo 11. The transport speed of a 35 mm film is 24 frames per second (= 45.6 cm / s).
Auf der gegenüberliegenden Seite des Films 4 ist ein zweiter Kondensor 12 angeordnet, der einen von der Lichttonspur 3 modulierten Lichtstrahl auf eine Zeilenkamera 13 lenkt. In dem vorliegenden Ausführungsbeispiel enthält die Zeilenkamera 13 einen CCD-Zeilensensor mit 512 Bildsensoren. Die Zeilenkamera 13 gibt ein RS-422-Datensignal in einer Wortbreite von 8 Bit pro Pixel aus. Das RS-422-Datensignal der Lichttonspur 3 gelangt über einen Dateneingang 14 zu einer programmgesteuerten Datenverarbeitungseinrichtung 15.A second condenser 12 is arranged on the opposite side of the film 4 and directs a light beam modulated by the light sound track 3 onto a line camera 13. In the present exemplary embodiment, the line camera 13 contains a CCD line sensor with 512 image sensors. The line camera 13 outputs an RS-422 data signal with a word length of 8 bits per pixel. The RS-422 data signal of the light track 3 passes through a Data input 14 to a program-controlled data processing device 15.
Die Datenverarbeitungseinrichtung 15 enthält einen Framegrabber 16, dessen Eingang an dem Dateneingang 14 der Datenverarbeitungseinrichtung 15 angeschlossen ist. Ein Ausgang des Framegrabbers 16 ist mit einem Bussystem 17 verbunden. Mit dem Bussystem 17 sind ferner verbunden: eine CPU 18, ein Speicher 19 zur Programm- und Datenspeicherung, ein Interface 20 mit einer Klemme 21 zur Übertragung von Servodaten von und zu dem Filmtransportservo 11 , eine Videoausgabeeinrichtung 22 mit einer Ausgangsklemme 23 zur Übertragung eines Videosignals zu einem Monitor 24 und eine Audioausgabeeinrichtung 25 mit einer Ausgangsklemme 26 zur Übertragung eines Audiosignals zu einem Lautsprecher 27.The data processing device 15 contains a frame grabber 16, the input of which is connected to the data input 14 of the data processing device 15. An output of the frame grabber 16 is connected to a bus system 17. Connected to the bus system 17 are also: a CPU 18, a memory 19 for program and data storage, an interface 20 with a terminal 21 for the transmission of servo data from and to the film transport servo 11, a video output device 22 with an output terminal 23 for the transmission of a video signal to a monitor 24 and an audio output device 25 with an output terminal 26 for transmitting an audio signal to a loudspeaker 27.
Der Framegrabber 16 bereitet eine von der Zeilenkamera 16 erzeugte serielle Bilddatenfolge der Lichttonspuren 3 auf, speichert sie zwischen und leitet sie in einer Auflösung von 8 Bit über das Bussystem 17 zu dem Speicher 19 weiter, in welchem die Bilddaten in einem RAW-Dateiformat gespeichert werden. Der Framegrabber 16 weist einen Ausgang 28 zur Synchronisierung der Zeilenkamera 13 auf. Zur Begrenzung der Datenübertragungsrate lässt sich die Abtastfrequenz von 24 Bildern pro Sekunde auf 6 Bilder reduzieren. Wird die Lichttonspur 3 mit 2000 Zeilen pro Filmbild abgetastet, erhält man mit einer auf 6 Bilder reduzierten Filmtransportgeschwindigkeit eine Nyquistfrequenz von 24 kHz. In diesem Fall ist in den Speicher 19 pro Sekunde eine Datenmenge von 24 MByte zu schreiben.The frame grabber 16 prepares a serial image data sequence of the light sound tracks 3 generated by the line camera 16, stores them temporarily and forwards them in a resolution of 8 bits via the bus system 17 to the memory 19, in which the image data are stored in a RAW file format , The frame grabber 16 has an output 28 for synchronizing the line camera 13. To limit the data transfer rate, the sampling frequency can be reduced from 24 frames per second to 6 frames. If the light sound track 3 is scanned with 2000 lines per film frame, a Nyquist frequency of 24 kHz is obtained with a film transport speed reduced to 6 frames. In this case, a quantity of data of 24 Mbytes must be written into the memory 19 per second.
Die vom Framegrabber 16 gelieferte Datenmenge ist vergleichsweise groß. Die Bilddaten der Lichttonspur 3 werden daher in einen Massenspeicher geschrieben, beispielsweise in einen Plattenspeicher des Speichers 19. Die Anwendungsprogramme zur Bearbeitung der Daten der Lichttonspur 3 sowie zur Regelung des Filmtransports sind in RAM- und ROM-Speichern des Speichers 19 abgelegt.The amount of data supplied by the frame grabber 16 is comparatively large. The image data of the light sound track 3 are therefore written into a mass memory, for example into a disk memory of the memory 19. The application programs for processing the data of the light sound track 3 and for regulating the film transport are stored in RAM and ROM memories of the memory 19.
Um während des Abtastvorgangs die Einstellungen der Beleuchtungsquelle 1 und der Zeilenkamera 13 zu kontrollieren, ist die Videoausgabeeinrichtung 22 vorgesehen, welche die digitalen Bilddaten der abgetasteten Lichttonspur 3 in ein analoges Videosignal zur Darstellung auf dem Monitor 24 umwandelt.In order to control the settings of the illumination source 1 and the line scan camera 13 during the scanning process, the video output device 22 is Provided, which converts the digital image data of the scanned light sound track 3 into an analog video signal for display on the monitor 24.
Zur Bildkontrolle der Lichttonspur 3 kann ein analoges Videosignal auch direkt vom Ausgang der Zeilenkamera 13 abgegriffen und dem Monitor 24 zugeleitet werden. Selbstverständlich ist es auch möglich, das analoge Videosignal dem Eingang eines Oszilloskops (nicht dargestellt) zuzuführen, um Einstellungen des Lichtstroms für maximale Signalpegel je nach Filmdichte oder die Fokussierung und Lage der Zeilenkamera 13 zu den Lichttonspuren 3 zu prüfen.For image control of the light sound track 3, an analog video signal can also be tapped directly from the output of the line camera 13 and fed to the monitor 24. Of course, it is also possible to feed the analog video signal to the input of an oscilloscope (not shown) in order to check settings of the luminous flux for maximum signal levels depending on the film density or the focus and position of the line camera 13 to the light sound tracks 3.
Die Audioausgabeeinrichtung 25 dient zur Abhörkontrolle. In der Audioausgabeeinrichtung 25 werden die im RAW-Dateiformat vorliegenden Bilddaten der Doppelzackenschrift DZ in ein Audio-Dateiformat, z.B. eine WAV- Dateiformat, umgewandelt.The audio output device 25 is used for monitoring monitoring. In the audio output device 25, the image data of the double-point font DZ available in the RAW file format are converted into an audio file format, e.g. a WAV file format.
Zur Verkopplung der Abtastfrequenz der Zeilenkamera 13 mit der Transportgeschwindigkeit des Films 4 wird der Filmtransportservo 11, welcher die Motoren der Zahnrollen 9 und 10 steuert, durch Daten geregelt, die die Datenverarbeitungseinrichtung 15 programmgesteuert anhand des von der Zeilenkamera 13 erzeugten Bilddatensignals ableitet. Das Interface 20 ist für eine bidirektionale Übertragung von Daten zwischen dem Filmtransportservo 11 und Bussystem 17 ausgelegt, so dass ein Austausch von Soll- und Ist-Datenwerten über die Drehzahlen der Zahnrollen 8 und 9 möglich ist.In order to couple the scanning frequency of the line camera 13 with the transport speed of the film 4, the film transport servo 11, which controls the motors of the toothed rollers 9 and 10, is regulated by data which the data processing device 15 derives in a program-controlled manner on the basis of the image data signal generated by the line camera 13. The interface 20 is designed for a bidirectional transmission of data between the film transport servo 11 and the bus system 17, so that an exchange of target and actual data values via the speeds of the toothed rollers 8 and 9 is possible.
Durch wiederholtes Kopieren eines Films auf neue Filmträger kommt es bei ungenauer Positionierung des Films und/oder der optischen Kopiereinrichtung zu einem Shading der homogenen Grauwerte. Ferner verursachen Staubpartikel auf dem Filmnegativ oder Filmpositiv beim Kopieren dunkle oder hellen Flecken auf der Lichttonspur 3. Außerdem kann es beim wiederholten Abspielen des Films 4 zu mechanischen Beschädigungen in Filmlaufrichtung kommen; Filme können auch reißen. Die Lichttonspur 3 eines geklebten Films 4 kann durch sogenannte Tonfliegen, die die Form eines Dreiecks aufweisen, überdeckt sein, so dass Tonstörungen entstehen. Während eines Kopiervorgangs kann einfallendes Licht an Stellen der Perforation oder des Filmbildes periodische Helligkeitsschwankungen erzeugen, die sich in einem 24-Hz- bzw. 96-Hz-Brumm in der wiedergegebenen Lichttoninformation äußern.Repeated copying of a film onto new film carriers results in shading of the homogeneous gray values if the film and / or the optical copying device is inexactly positioned. Furthermore, dust particles on the film negative or film positive cause dark or light spots on the light sound track 3 when copied. In addition, mechanical repetition of the film 4 can occur when the film 4 is played back; Films can tear too. The light soundtrack 3 of a glued film 4 can be covered by so-called clay flies, which have the shape of a triangle, so that sound disturbances arise. During a copying process, incident light can be periodic at places of the perforation or the film image Generate fluctuations in brightness, which are expressed in a 24 Hz or 96 Hz hum in the reproduced light tone information.
Die im Speicher 19 zwischengespeicherten Bildpunktdaten der Lichttonspur 3 sind zunächst einer Fixed-Pattern-Noise-(FPN)-Korrektur zu unterwerfen. Einzelheiten zu dieser Korrektur sind der älteren deutschen Patentanmeldung P 10044 978.6 zu entnehmen.The pixel data of the light track 3 temporarily stored in the memory 19 are first to be subjected to a fixed pattern noise (FPN) correction. Details of this correction can be found in the older German patent application P 10044 978.6.
In einem nächsten Bearbeitungsschritt ist der Helligkeitsumfang des durch Abtasten der Lichttonspur 3 erzeugten digitalen Bildsignals zu optimieren. Dabei werden Helligkeitswerte darstellende Datenwerte der zwischengespeicherten Bildpunkten von mehreren Zeilen programmgesteuert entweder einer linearen oder einer nicht-linearen Filterung unterworfen. Es werden Helligkeitswerte der Bildpunkte so verändert, dass ein durch wechselnde Filmdichten oder wechselnde Beleuchtung erzeugtes fehlerhaftes Bildsignal der Doppelzackenschrift nur Bildanteile mit konstantem Schwarz und konstantem Weiß aufweist.In a next processing step, the brightness range of the digital image signal generated by scanning the light sound track 3 is to be optimized. In this case, data values representing the brightness values of the temporarily stored pixels of several lines are program-controlled subjected to either a linear or a non-linear filtering. The brightness values of the pixels are changed in such a way that a faulty image signal of the double-point font, generated by changing film densities or changing lighting, only has image components with constant black and constant white.
Bei der linearen Filterung werden extrem helle Bildpunkte in der Heiligkeit begrenzt. Für eine Filterung werden die Datenwerte der zwischengespeicherten Bildpunkte des durch Abtasten der Lichttonspur 3 erzeugten Bildsignals vorteilhaft mit einem Normierungsfaktor multipliziert. Der Normierungsfaktor berechnet sich nach der Gleichung:With linear filtering, extremely bright pixels are limited in their sanctity. For filtering, the data values of the temporarily stored pixels of the image signal generated by scanning the light sound track 3 are advantageously multiplied by a normalization factor. The normalization factor is calculated according to the equation:
Normfaktor = 255 / Hellwert.Norm factor = 255 / light value.
Der in der Gleichung verwendete Hellwert ist der mittlere maximale Hellwert der ersten 2000 Zeilen im Bildsignal. Der Hellwert wird ermittelt, indem jeweils der hellste Wert in 2000 Zeilen ermittelt wird. Von den ermittelten 2000 Helligkeitswerte wird ein Mittelwert gebildet.The brightness value used in the equation is the average maximum brightness value of the first 2000 lines in the image signal. The light value is determined by determining the lightest value in 2000 lines. A mean value is formed from the 2000 brightness values determined.
Der neue, geänderte Helligkeitswert von Bildpunkten berechnet sich nach der Gleichung:The new, changed brightness value of pixels is calculated according to the equation:
Bildpunkt (neu) = Bildpunkt (alt) * Normfaktor Bei der nicht-linearen Filterung werden helle und dunkle Bildpunkte nach einer Kosinus-Funktion verdichtet, wobei mittlere Grauwerte nicht beeinflusst werden. Diese Maßnahme entspricht einer Flankenversteilung in einem analogen Bildsignal an Schwarz- Weiß-Übergängen.Pixel (new) = pixel (old) * standard factor With non-linear filtering, light and dark pixels are compressed using a cosine function, whereby mean gray values are not affected. This measure corresponds to an edge distribution in an analog image signal at black and white transitions.
Das nicht-lineare Filter ändert Helligkeitswerte der Bildpunkte nach folgender Gleichung:The non-linear filter changes the brightness values of the pixels according to the following equation:
255 255 f Büdpunkt(alt) * π *2 Bildpunkt(ne ) = • cos255 255 f Büdpunkt (old) * π * 2 pixel (ne) = • cos
255 «2255 «2
Der beidseitige Kantenverlauf einer Doppelzackenschrift bestimmt die Frequenz und die Amplitude der aufgezeichneten Toninformationen. In der Praxis besteht die Kante jedoch nicht aus einem abrupten Helligkeitssprung, sondern aus einem stetigen Übergang vom Hellen ins Dunkle oder umgekehrt. Die Länge der Kante ist dabei nicht konstant; sie variiert mit der Frequenz und der Amplitude der Toninformation. Bei einer zeilenweisen Abtastung der Lichttonspur 3 mit einer 512 Bildpunkte pro Zeile aufweisenden CCD-Zeilenkamera kann der Helligkeitsübergang einer Kante einen Bereich zwischen 8 und 40 Bildpunkten umfassen.The double-sided edge course of a double-point writing determines the frequency and the amplitude of the recorded sound information. In practice, however, the edge does not consist of an abrupt jump in brightness, but rather a steady transition from light to dark or vice versa. The length of the edge is not constant; it varies with the frequency and amplitude of the sound information. When scanning the light sound track 3 line by line with a CCD line camera having 512 pixels per line, the brightness transition of an edge can encompass a range between 8 and 40 pixels.
Ein Kennzeichen für die exakte Position der linken und rechten Kante der Doppelzackenschrift DZ ist das Vorliegen eines mittleren Grauwertes in der Bildpunktfolge. In einem analogen Bildsignal würde der mittlere Grauwert der Flankenmitte in einem Helligkeitssprurig entsprechen. Der Wert des mittlere Grauwertes lässt sich zeilenweise wie folgt berechnen:A characteristic of the exact position of the left and right edges of the double-point font DZ is the presence of a medium gray value in the sequence of pixels. In an analog image signal, the mean gray value would correspond to the center of the flank in one brightness. The value of the mean gray value can be calculated line by line as follows:
Weißwert = Weißwert +20 ∑Anzahl (g) * g _Anzahl (g) s^eißwert-20 g -Weißwert -20 wobei g dem Grauwert entspricht. 1 Schwarzwert +20White value = white value +20 ∑number (g) * g _number (g) s ^ white value - 20 g -white value -20 where g corresponds to the gray value. 1 black level +20
Schwarzwert = Schwarzwert +20 ^_4«zα/z/ (£) • £ Anzahl (i ) *=-&*»»»««* -∞ g =Schwarzwert -20Black level = black level + 2 0 ^ _4 «zα / z / (£ ) • £ number (i) * = - & *» »» « « * -∞ g = black level -20
Weißwert •SchwarzwertWhite level • Black level
Gr altwert =Gr old value =
wobei der Weißwert bzw. Schwarzwert ein in einem Histogramm gefundener Wert ist.the white value or black value being a value found in a histogram.
Eine Kante in der Doppelzackenschrift liegt vor, wenn folgende Bedingung erfüllt ist:There is an edge in the double-pointed font if the following condition is met:
Pixπ_2 +Pix„_1 +Pix„ Pix„_x +Pixn A-PixPix π _ 2 + Pix „_ 1 + Pix„ Pix „_ x + Pix n A-Pix
—Grauwert] — -Grauwertl—Gray value] - -Gray value
Hier entspricht Pixn dem Datenwert eines Bildpunktes an der Stelle n innerhalb einer Zeile.Pix n corresponds to the data value of a pixel at position n within a line.
Ist die Bedingung erfüllt, wird ergänzend geprüft, ob die Kante über einen Bereich von +/- 2 Bildpunkten stetig ist. Ist das der Fall, so ist ein Kantenbildpunkt und damit die bildpunktgenaue Position einer Kante innerhalb einer Abtastzeile gefunden.If the condition is met, a supplementary check is carried out to determine whether the edge is continuous over a range of +/- 2 pixels. If this is the case, an edge pixel and thus the pixel-precise position of an edge within a scan line has been found.
Da die Mitte einer Lichttonspur aufgrund von Aufzeichnungsfehlern mit der Mitte der aufgezeichneten Doppelzackenschrift nicht übereinstimmt, wird in dem vorliegenden Ausführungsbeispiel die Mitte der Doppelzackenschrift anhand der beiden Kanten Zeile für Zeile berechnet.Since the center of a light sound track does not coincide with the center of the recorded double-point writing due to recording errors, in the present exemplary embodiment the center of the double-point writing is calculated line by line using the two edges.
Um die Mitte einer Doppelzackenschrift noch genauer zu bestimmen, werden erfindungsgemäß die Kanten zunächst subpixelgenau berechnet. Dabei wird um den zuvor gefundenen Kantenbildpunkte herum der genaue Grauwert gesucht. Der neue Bildpunktort ist die subpixelgenaue Position einer Kante. Die linke Kante wird nach folgender Gleichung berechnet: genaueKantsLinks = (KanteLinks -l)+ o In order to determine the center of a double-point font even more precisely, the edges are first calculated with sub-pixel accuracy according to the invention. The exact gray value is searched for around the previously found edge pixels. The new pixel location is the sub-pixel exact position of an edge. The left edge is calculated according to the following equation: exact edge left = (edge left -l) + o
V "^ KanteLinh - ~ "lX Ka teLin +1 JV "^ KanteLinh - ~" lX Ka teLin +1 J
In der Gleichung entspricht „Pix" dem Wert des Pixels und „KanteLinks" dem Ort des Pixels.In the equation, "Pix" corresponds to the value of the pixel and "EdgeLeft" corresponds to the location of the pixel.
Die rechte Kante wird entsprechen subpixelgenau berechnet.The right edge is calculated with sub-pixel accuracy.
Ist der Ort der beiden Kanten innerhalb einer Zeile subpixelgenau gefunden, lässt sich nunmehr auch die Mitte der Doppelzackenschrift wird subpixelgenau berechnen. Das geschieht nach folgender Gleichung:If the location of the two edges within a line is found with sub-pixel accuracy, the center of the double-point font can now also be calculated with sub-pixel accuracy. This is done according to the following equation:
Mitte = {KanteRechts + KanteLinks)/ 2Middle = {Edge Right + Edge Left) / 2
Um die Mitte genauer zu beurteilen, wird nachfolgende eine ideale Mitte berechnet. Die ideale Mitte wird über 50 Zeilen gemittelt, wobei Zeilen, die um einen bestimmten Wert („FEHLER") von dieser idealen Mitte abweichen, nicht einberechnet werden. In diesem Fall wird ein Fehler in dieser Zeile erkannt.In order to assess the center more precisely, an ideal center is subsequently calculated. The ideal center is averaged over 50 lines, whereby lines that deviate from this ideal center by a certain value ("ERROR") are not included. In this case, an error is detected in this line.
Die Fig. 5 zeigt vergrößert einen Ausschnitt der Lichttonspur 3 mit bildbearbeiteter (schwarzer) Doppelzackenschrift DZ. In dem Ausschnitt ist die ermittelte ideale Mitte M - um einen Faktor 10 gedehnt - zusammen mit der Doppelzackenschrift DZ dargestellt. Die ideale Mitte M ist als feste Mittellinie gezeichnet. Zwei weitere Mittellinien Mi und Mr sind +/- 1 Bildpunkte von der Mitte M entfernt; die weiteren Mittellinien Mi und Mr dienen vorteilhaft als Bewertungshilfe. Die schwarze Doppelzackenschrift DZ mit Reintonblende RB wird links und rechts durch eine Kanten begrenzt.5 shows an enlarged detail of the light sound track 3 with image-processed (black) double-point writing DZ. The cutout shows the ideal center M - stretched by a factor of 10 - together with the double-point script DZ. The ideal center M is drawn as a fixed center line. Two further center lines Mi and M r are +/- 1 pixels from the center M; the other center lines Mi and M r advantageously serve as an evaluation aid. The black double-point font DZ with pure tone aperture RB is delimited on the left and right by an edge.
Messungen haben ergeben, dass nicht in jedem Fall eine Kante gefunden wird, und ferner, dass eine gefundene Kante nicht immer richtig ist. Eine Doppelzackenschrift besitzt Symmetrieeigenschaften. Die zwei Kanten der Doppelzackenschrift sind symmetrisch zueinander. Die Eigenschaft lässt sich vorteilhaft zur Restaurierung einsetzen, indem die Zackenschrift an der Mitte gespiegelt wird. Es entsteht eine Einfachzackenschrift, in welcher Bildfehler durch Kratzer und Flecken nur noch die halbe Helligkeitsintensität haben.Measurements have shown that an edge is not always found and that an edge is not always correct. A double point font has symmetry properties. The two edges of the double-point font are symmetrical to each other. The property can be used advantageously for restoration by using the serrated writing in the middle is mirrored. The result is a single-point writing, in which image errors due to scratches and stains are only half the intensity of the brightness.
Sollte innerhalb einer Zeile eine Kante der Doppelzackenschrift nicht gefunden werden oder eine erkannte Kante offensichtlich falsch sein, wird anstelle der nicht gefundenen bzw. fehlerhaften Kante die Kante der gegenüberliegenden Seite zur Festlegung der Kantenposition herangezogen.If an edge of the double-point font is not found within a line or if a recognized edge is obviously incorrect, the edge of the opposite side is used to determine the edge position instead of the edge which was not found or which is incorrect.
Beim Nichterkennen einer Kante lässt sich die Position der anderen Kante (PositionNeue Kante) beispielsweise nach folgender Gleichung berechnen:If one edge is not recognized, the position of the other edge (PositionNew edge) can be calculated using the following equation, for example:
PositionNeueKante = 2 »IdealeπMitte — gegenüberliegendeKantePositionNewEdge = 2 »IdealπMitte - opposite edge
Eine fehlerhafte Kantenposition wird erkannt, wenn die ermittelte Mitte der Doppelzackenschrift um einen bestimmten, vom Benutzer vorgegebenen Wert von der idealen Mitte abweicht.A faulty edge position is recognized when the determined center of the double-point writing deviates from the ideal center by a certain value specified by the user.
Fehlerhafte erkannte Bildpunkte in Teilstücken der Kantenverläufe lassen sich vorteilhaft nach der eingangs beschriebenen Autokorrelationsfunktion korrigieren.Incorrectly recognized pixels in sections of the edge profiles can advantageously be corrected using the autocorrelation function described at the beginning.
Bei einer Fehlerverdeckung werden als fehlerhaft erkannte Bildpunkte, die außerhalb der Kanten der Doppelzackenschrift liegen, durch Ersatzbildpunkte, die einen bestimmten vorgegebenen Grauwert aufweisen, ersetzt. Um eine Fehlerverdeckungsmaßnahme anzuwenden, sollte das Kantenende der Doppelzackenschrift definiert werden. Es sollte definiert sein, dass dasIn the event of an error concealment, pixels identified as defective which lie outside the edges of the double-point writing are replaced by replacement pixels which have a specific predetermined gray value. In order to apply an error concealment measure, the edge end of the double point font should be defined. It should be defined that that
Kantenende einen festen Abstand von der Kantenmitte zu haben hat, zum Beispiel einen Abstand zwischen 5 und 15 Bildpunkten. Bei einer anderen Definition könnte festgelegt sein, dass ausgehend von der Kantenmitte der Bildpunkt gesucht wird, bei welchem die Helligkeit zum nächsten Bildpunkt gleich bleibt oder wieder abnimmt.Edge end must have a fixed distance from the center of the edge, for example a distance between 5 and 15 pixels. Another definition could stipulate that, starting from the center of the edge, the search is made for the pixel at which the brightness remains the same to the next pixel or decreases again.
Die Fig. 4 zeigt ein Flussdiagramm über die zuvor beschriebenen Maßnahmen zur Bearbeitung einer Doppelzackenschrift, die durch Abtasten einer Lichttonspur 3 erzeugt und als Bildpunktdatei mit Bildpunktdaten von jeweils 2000 Zeilen in dem Speicher 19 abgelegt ist.FIG. 4 shows a flowchart of the measures described above for processing a double-point font, which is performed by scanning a light sound track 3 generated and stored in the memory 19 as a pixel file with pixel data of 2000 lines each.
In dem Flussdiagramm der Fig. 4 wird bei 40 auf die in dem Speicher 19 gespeicherte Datei mit den Bildpunktdaten der abgetasteten Lichttonspur 3 zugegriffen. Die Bildpunktdaten werden bei 41 dahingehend untersucht, ob sich die beiden seitlichen Begrenzungen (Kanten) einer Doppelzackenschrift DZ finden lassen. Wird bei 42 festgestellt, dass nur eine einzige Kante vorliegt, wird bei 43 die ermittelte Kante auf die andere Seite gespiegelt. Sollte dagegen bei 44 festgestellt werden, dass keine Kante gefunden wurde, wird bei 45 die Kante der Vorzeile zur weiteren Verarbeitung herangezogen. Liegen beide Kanten vor, kann bei 46 die Mitte der Doppelzackenschrift DZ berechnet werden.In the flowchart of FIG. 4, the file with the pixel data of the scanned light sound track 3 stored in the memory 19 is accessed at 40. The pixel data are examined at 41 to determine whether the two lateral boundaries (edges) of a double-point font DZ can be found. If it is determined at 42 that there is only a single edge, the determined edge is mirrored at 43 on the other side. If, on the other hand, it is determined at 44 that no edge was found, the edge of the front line is used at 45 for further processing. If both edges are present, the center of the double-point script DZ can be calculated at 46.
In einem nächsten Schritt 47 wird geprüft, ob die berechnete Mitte erheblich von einer idealen Mitte abweicht. Ist das der Fall, wird bei 48 ferner geprüft, ob ein Fehler vorliegt. Im gegenteiligen Fall, wird bei 49 die ideale Mitte berechnet.In a next step 47 it is checked whether the calculated center deviates significantly from an ideal center. If this is the case, it is further checked at 48 whether there is an error. In the opposite case, the ideal center is calculated at 49.
Je nach dem, ob ein Fehler innerhalb oder außerhalb des Spurverlaufs der Doppelzackenschrift DZ vorliegt, verzweigt der weitere Verlauf der Signalverarbeitung. Liegt der Fehler innerhalb des Spurverlaufs derThe further course of the signal processing branches depending on whether there is an error inside or outside the track course of the double-point script DZ. If the error lies within the course of the track
Doppelzackenschrift DZ, wird bei 50 eine fehlerhafte Kante neu berechnet. Sollte der Fehler jedoch außerhalb des Spurverlaufs der Doppelzackenschrift DZ liegen, wird bei 51 die fehlerhafte Kante nach einem entsprechend angepaßten Algorithmus neu berechnet. Nachfolgend wird bei 52 die Mitte und die Kanten der Doppelzackenschrift DZ gezeichnet und bei 53 eine Datei erstellt, welcheDouble-point font DZ, a faulty edge is recalculated at 50. If, however, the error lies outside of the course of the double-point script DZ, the faulty edge is recalculated at 51 according to an appropriately adapted algorithm. Subsequently, the center and the edges of the double-point font DZ are drawn at 52 and a file is created at 53, which
Bilddaten der Doppelzackenschrift DZ sowie der Kanten und der Mitte enthält.Contains image data of the double-point font DZ as well as the edges and the center.
Für eine Wiedergabe der auf einer Lichttonspur 3 aufgezeichneten Toninformationen sind die in einem RAW-Dateiformat nunmehr bearbeitet vorliegenden Bilddaten in Audiodaten eines WAV-Dateiformats umzuwandeln. Die Umwandlung ist an sich bekannt. Dabei werden im einfachsten Fall die Datenwerte aller Bildpunkte einer jeden Zeile zeilenweise summiert, anschließend gemittelt und dann in ein Audiodatenwort überführt. Die Datenfolge der Zeile für Zeile erzeugten Audiodatenworte wird in das WAV-Dateiformat transformiert. Die so erzeugte WAV-Datei der aufgezeichneten Lichttoninformationen kann über die Soundkarte eines PCs dekodiert und in eine analoge Toninformation für eine Abstrahlung über den Lautsprecher 24 D/A-gewandelt werden.In order to reproduce the sound information recorded on a light sound track 3, the image data now processed in a RAW file format must be converted into audio data in a WAV file format. The transformation is known per se. In the simplest case, the data values of all pixels of each line are summed line by line, then averaged and then converted into an audio data word. The data sequence of the audio data words generated line by line is transformed into the WAV file format. The WAV file of the recorded light sound information thus generated can be decoded via the sound card of a PC and converted into analog sound information for radiation via the loudspeaker 24 D / A.
Die Erfindung wurde am Beispiel einer Doppelzackenschrift beschrieben. Die Verwendung der erfindungsgemäßen Vorrichtung bleibt nicht auf die Wiedergabe von Lichttoninformationen in Doppelzackenschrift beschränkt. Selbstverständlich lässt sich die erfindungsgemäße Vorrichtung auch zur Wiedergabe von Lichttoninformationen, die in Einfachzackenschriften oder Mehrfachzackenschriften vorliegen, entsprechend einsetzen. Weiterhin kann die erfindungsgemäße Vorrichtung auch zur Wiedergabe von Filmen eingesetzt werden, die in einem anderen Filmformat aufgenommen worden sind, zum Beispiel in einem 16-mm-Filmformat. The invention was described using the example of a double-point script. The use of the device according to the invention is not limited to the reproduction of light tone information in double-point writing. Of course, the device according to the invention can also be used accordingly for reproducing light tone information which is present in single-point fonts or multiple-point fonts. Furthermore, the device according to the invention can also be used for the reproduction of films which have been recorded in another film format, for example in a 16 mm film format.

Claims

PATENTANSPRÜCHE
1. Vorrichtung zur Wiedergabe von Lichttonaufzeichnungen, welche eine opto-elektronische Wandlereinrichtung (1 , 2, 4, 9 bis 13) zur optischen Abtastung einer Lichttonspur (3) aufweist, die an einem Ausgang ein digitales Bildsignal der abgetasteten Lichttonspur (3) ausgibt, und welche eine Einrichtung (19) zur Zwischenspeicherung des von der Wandlereinrichtung (1 ,1. Device for reproducing light sound recordings, which has an opto-electronic converter device (1, 2, 4, 9 to 13) for optically scanning a light sound track (3) which outputs a digital image signal of the scanned light sound track (3) at an output, and which a device (19) for the intermediate storage of the from the converter device (1,
2, 4, 9 bis 13) ausgegebenen Bildsignals enthält, gekennzeichnet durch eine Einrichtung (15) zur programmgesteuerten Datenverarbeitung des zwischengespeicherten Bildsignals, welche zunächst von Datenwerten des Bildsignals den Verlauf von Kanten einer Zackenschrift ermittelt und welche sodann von Daten des ermittelten Kantenverlaufes Audiodaten für eine2, 4, 9 to 13) contains the output image signal, characterized by a device (15) for program-controlled data processing of the temporarily stored image signal, which first determines the course of edges of a serrated character from data values of the image signal and which then audio data for a data of the determined edge course
Tonwiedergabe erzeugt.Sound reproduction generated.
2. Vorrichtung nach Anspruch 1 , dadurch gekennzeichnet, dass die Datenverarbeitungseinrichtung (15) durch ein Programm derart steuerbar ist, dass Helligkeitswerte darstellende Datenwerte von Bildpunkten mehrerer2. Device according to claim 1, characterized in that the data processing device (15) can be controlled by a program in such a way that data values of pixels representing several brightness values
Zeilen einer Filterung unterworfen werden, um bestimmte Helligkeitswerte der Bildpunkte nach einer vorgegebenen Funktion zu verändern.Lines are subjected to filtering in order to change certain brightness values of the pixels according to a predetermined function.
3. Vorrichtung nach Anspruch 1 und 2, dadurch gekennzeichnet, dass die Helligkeitswerte der Bildpunkte nach einer linearen Übertragungsfunktion veränderbar sind.3. Device according to claim 1 and 2, characterized in that the brightness values of the pixels can be changed according to a linear transfer function.
4. Vorrichtung nach Anspruch 1 und 2, dadurch gekennzeichnet, dass die Helligkeitswerte der Bildpunkte nach einer nicht-linearen Übertragungsfunktion, insbesondere nach einer Kosinus-Funktion, veränderbar sind.4. The device according to claim 1 and 2, characterized in that the brightness values of the pixels can be changed according to a non-linear transfer function, in particular according to a cosine function.
5. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass zur Festlegung des Kantenverlaufs einer Zackenschrift die Datenverarbeitungseinrichtung (15) durch ein Programm derart steuerbar ist, dass die Position von Helligkeitssprüngen innerhalb einer Abtastzeile durch Auswerten der Verteilung von Helligkeitswerte darstellenden Datenwerten der Bildpunkte bestimmt wird.5. The device according to claim 1, characterized in that to determine the edge profile of a serrated lettering, the data processing device (15) can be controlled by a program such that the position of brightness jumps within a scan line is determined by evaluating the distribution of data values of the pixels representing brightness values.
6. Vorrichtung nach Anspruch 1 und 5, dadurch gekennzeichnet, dass für die Wiedergabe einer in Doppelzackenschrift (DZ) aufgezeichneten Toninformation die Datenverarbeitungseinrichtung (15) durch ein Programm so steuerbar ist, dass in einem ersten Schritt die Lage von quer zur Längsrichtung des Films (4) verlaufenden Kantengrenzen anhand der Position von Helligkeitssprüngen im Zeilenverlauf durch Auswerten der Helligkeitswerte darstellende Datenwerte der Bildpunkte ermittelt wird, dass in einem zweiten Schritt eine zwischen den ermittelten Kantengrenzen verlaufende Spurmitte berechnet wird, dass in einem dritten Schritt die zwischengespeicherten Bildpunktdaten an der berechneten Spurmitte gespiegelt werden, so dass Bildpunktdaten einer Einzackenschrift entstehen.6. The device according to claim 1 and 5, characterized in that for the reproduction of a sound information recorded in double-point writing (DZ), the data processing device (15) can be controlled by a program so that in a first step the position from transverse to the longitudinal direction of the film ( 4) the running edge boundaries on the basis of the position of brightness jumps in the line course by evaluating the data values of the pixels representing brightness values, it is determined that in a second step a track center running between the determined edge boundaries is calculated, that in a third step the temporarily stored pixel data is mirrored at the calculated track center so that pixel data of a single-point font is created.
7. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) zum Zweck einer Fehlererkennung so angelegt ist, dass beim Auswerten von Bildpunktdaten einer7. The device according to claim 6, characterized in that the program of the data processing device (15) is designed for the purpose of error detection so that when evaluating pixel data one
Doppelzackenschrift (DZ) der Lagebereich der Spurmitte durch Setzen einer oberen und unteren Schwelle begrenzt wird.Double point writing (DZ) the position range of the middle of the track is limited by setting an upper and lower threshold.
8. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) so angelegt ist, dass bei einer8. The device according to claim 6, characterized in that the program of the data processing device (15) is designed so that at a
Doppelzackenschrift (DZ) der Verlauf ermittelter Kantengrenzen und/oder der Verlauf der Spurmitte nach einer vorgegebenen Funktion geglättet wird.Double-point writing (DZ) the course of determined edge boundaries and / or the course of the track center is smoothed according to a predetermined function.
9. Vorrichtung nach Anspruch 1 und 5, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) mindestens eine9. The device according to claim 1 and 5, characterized in that the program of the data processing device (15) at least one
Prüfroutine zur Erkennung von Fehlern in einer Doppelzackenschrift (DZ) aufweist. Check routine for the detection of errors in a double point (DZ).
10. Vorrichtung nach Anspruch 7 und 9, dadurch gekennzeichnet, dass ein Überschreiten der oberen und/oder unteren Schwelle des Lagebereichs der ermittelten Spurmitte als Fehler im Kantenverlauf der Doppelzackenschrift (DZ) gewertet wird.10. The device according to claim 7 and 9, characterized in that exceeding the upper and / or lower threshold of the position area of the determined track center is evaluated as an error in the edge course of the double-point writing (DZ).
11. Vorrichtung nach Anspruch 7 und 9, dadurch gekennzeichnet, dass das Überschreiten einer bestimmten Grenze im Kantenverlauf der Doppelzackenschrift (DZ) als Fehler im Kantenverlauf der Doppelzackenschrift (DZ) gewertet wird.11. The device according to claim 7 and 9, characterized in that the exceeding a certain limit in the edge course of the double-point writing (DZ) is evaluated as an error in the edge course of the double-point writing (DZ).
12. Vorrichtung nach Anspruch 1 und 5, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) mindestens eine Routine zur Verdeckung von Fehlern in einer Doppelzackenschrift (DZ) aufweist.12. The device according to claim 1 and 5, characterized in that the program of the data processing device (15) has at least one routine for concealing errors in a double-pointed script (DZ).
13. Vorrichtung nach Anspruch 12, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung so angelegt ist, dass beim Erkennen von Fehlern in Bildpunkten einer Doppelzackenschrift (15) die fehlerhaften Bildpunkte durch fehlerfreie Bildpunkte einer vorhergehenden Zeile der Doppelzackenschrift (DZ) ersetzt werden.13. The apparatus according to claim 12, characterized in that the program of the data processing device is designed so that when errors in pixels of a double-point font (15) are recognized, the defective pixels are replaced by error-free pixels of a previous line of double-point font (DZ).
14. Vorrichtung nach Anspruch 12, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) so angelegt ist, dass beim Erkennen von Fehlern in Bildpunkten zwischen Kantengrenzen einer Doppelzackenschrift (DZ) der Datenwert eines fehlerhaften Bildpunktes durch den Datenwert eines schwarzen Bildpunktes ersetzt wird.14. The apparatus according to claim 12, characterized in that the program of the data processing device (15) is set up such that when errors in pixels are recognized between edge boundaries of a double-point font (DZ), the data value of a defective pixel is replaced by the data value of a black pixel.
15. Vorrichtung nach Anspruch 12, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) so angelegt ist, dass beim Erkennen von Fehlern in Bildpunkten außerhalb der Kantengrenzen einer Doppelzackenschrift (DZ) der Datenwert eines fehlerhaften Bildpunktes durch den Datenwert eines vorgegebenen grauen Bildpunktes ersetzt wird.15. The apparatus according to claim 12, characterized in that the program of the data processing device (15) is designed so that when detecting errors in pixels outside the edge boundaries of a double-point font (DZ), the data value of a defective pixel is replaced by the data value of a predetermined gray pixel becomes.
16. Vorrichtung nach Anspruch 12, dadurch gekennzeichnet, dass das Programm der Datenverarbeitungseinrichtung (15) so angelegt ist, dass beim Erkennen von Fehlern in Bildpunkten außerhalb der Kantengrenzen einer Doppelzackenschrift (DZ) der Datenwert eines fehlerhaften Bildpunktes durch einen durch Autokorrelation ermittelten Datenwert ersetzt wird.16. The apparatus according to claim 12, characterized in that the program of the data processing device (15) is designed so that when recognizing In the case of errors in pixels outside the edge boundaries of a double-point writing (DZ), the data value of a faulty pixel is replaced by a data value determined by auto-correlation.
17. Vorrichtung nach Anspruch 16, dadurch gekennzeichnet, dass zur17. The apparatus according to claim 16, characterized in that for
Berechnung der fehlerhaften Bildpunkt in Teilstücken der Kantenverläufe durch Anwendung einer Autokorrelation zunächst folgender Algorithmus berechnet:Calculation of the defective pixels in sections of the edge profiles by applying an autocorrelation, first the following algorithm is calculated:
1 ^o 1 avoΛn)- ^- * £\ g(y- f)*g(y- i- ) a(0) i=01 ^ o 1 avoΛn) - ^ - * £ \ g (y- f) * g (y- i-) a (0) i = 0
wobei g(y) ein Grauwert, y eine Zeilennummer, • / ein laufender Index von 0 bis N-1 , n eine Variable der Autokorrelationsfunktion mit n - 0 bis N-1, N die Anzahl der für die Restaurierung zu verwendenden ungestörten Zeilen ist, und dass sodann fehlerhafte Bildpunkte durch einen Grauwertbildpunkte ersetzt werden, deren Lage innerhalb einer Zeile folgender Funktion genügen:where g (y) is a gray value, y is a line number, • / a running index from 0 to N-1, n is a variable of the autocorrelation function with n - 0 to N-1, N is the number of undisturbed lines to be used for the restoration , and that defective pixels are then replaced by a gray value pixels, the position of which within a line fulfills the following function:
g(z) = * g(z - Pvor) + * g(z + Pnach)g (z) = * g (z - Pvor) + * g (z + Pnach)
Z + l Z + lZ + l Z + l
wobei • g(z) ein zu ersetzender Grauwert,where • g (z) is a gray value to be replaced,
• Z die Anzahl von zu ersetzenden Zeilen,Z the number of lines to be replaced,
• z die Zeilennummer, 1 ≤ z ≤ Z,Z the line number, 1 ≤ z ≤ Z,
' Pvor bzw. Pnach die Periodizitäten in Tonspuren vor bzw. nach einem erkannten Fehler bedeuten.'Pvor or Pnach mean the periodicities in sound tracks before or after a detected error.
18. Verfahren zur Wiedergabe von Lichttonaufzeichnungen, - bei welchem durch Abtasten einer Lichttonspur ein digitales Bildsignal erzeugt wird,18. method for reproducing light sound recordings, in which a digital image signal is generated by scanning a light sound track,
- bei welchem Daten des erzeugten Bildsignals zwischengespeichert werden,at which data of the generated image signal are buffered,
- bei welchem abhängig von Werten der zwischengespeicherten Daten ein Kantenverlauf einer auf der Lichttonspur aufgezeichneten Zackenschrift ermittelt wird und- at which, depending on the values of the temporarily stored data, an edge profile of a serrated text recorded on the light sound track is determined and
- bei welchem abhängig vom ermittelten Kantenverlauf entsprechende Audiodaten für eine Tonwiedergabe abgeleitet werden. - At which, depending on the determined edge profile, corresponding audio data for sound reproduction are derived.
1/31.3
1515
EP01983447A 2000-09-11 2001-08-22 Device and method for reproducing photographic sound recordings Withdrawn EP1317848A2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE10044978 2000-09-11
DE10044978 2000-09-11
PCT/EP2001/009686 WO2002021821A2 (en) 2000-09-11 2001-08-22 Device and method for reproducing photographic sound recordings

Publications (1)

Publication Number Publication Date
EP1317848A2 true EP1317848A2 (en) 2003-06-11

Family

ID=7655873

Family Applications (1)

Application Number Title Priority Date Filing Date
EP01983447A Withdrawn EP1317848A2 (en) 2000-09-11 2001-08-22 Device and method for reproducing photographic sound recordings

Country Status (5)

Country Link
US (1) US7400821B2 (en)
EP (1) EP1317848A2 (en)
JP (1) JP2004508603A (en)
AU (1) AU2002214955A1 (en)
WO (1) WO2002021821A2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10115342A1 (en) * 2001-03-28 2002-10-02 Philips Corp Intellectual Pty Device for scanning films
CA2460364A1 (en) * 2001-09-17 2003-03-27 Thomson Licensing S.A. Variable area film soundtrack renovation
US7050142B2 (en) * 2001-09-17 2006-05-23 Technicolor Inc. Digital reproduction of optical film soundtracks
US7053978B2 (en) * 2001-09-17 2006-05-30 Technicolor Inc. Correction of optical film soundtrack deficiencies
US7126663B2 (en) 2001-09-17 2006-10-24 Technicolor Inc. Variable area film soundtrack renovation
WO2004099872A1 (en) * 2003-05-02 2004-11-18 Thomson Licensing S.A. Digital reproduction of variable density film soundtracks
NO20043791D0 (en) * 2004-09-09 2004-09-09 Rune Bjerkestrand Method and device for recording soundtracks onto film
FR2954528B1 (en) * 2009-12-17 2012-02-24 Univ La Rochelle METHOD AND DEVICE FOR RESTITUTION OF A SOUND SIGNAL AND / OR A SOUND TRACK

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4124784A (en) * 1977-05-23 1978-11-07 Dbx, Inc. Motion picture sound system
GB1598113A (en) * 1977-06-03 1981-09-16 Dolby Lab Licensing Corp Apparatus for scanning variable area optical sound tracks
JPS5468202A (en) * 1977-11-10 1979-06-01 Sony Corp Reproducing method of optical recording signal
JPS5481810A (en) * 1977-12-07 1979-06-29 Kokusai Gijutsu Kaihatsu Kk Recorder*reproducer
US4211997A (en) * 1978-11-03 1980-07-08 Ampex Corporation Method and apparatus employing an improved format for recording and reproducing digital audio
US4577302A (en) * 1983-03-14 1986-03-18 Dolby Laboratories Licensing Corporation Apparatus for reproducing motion picture film photographic sound-tracks to correct reproduction errors and reduce noise
JP2583878B2 (en) * 1987-03-13 1997-02-19 株式会社リコー How to fill the area inside the closed figure
US5121377A (en) * 1988-04-19 1992-06-09 Bose Corporation Error detection method and apparatus for reducing the number of errors generated when reading digital data stored on a recording medium such as film
EP0494267B1 (en) * 1989-09-29 1995-01-25 Eastman Kodak Company Digital optical sound system
EP0744869B1 (en) * 1990-12-28 2000-03-22 Canon Kabushiki Kaisha Image processing apparatus
US5141306A (en) * 1991-07-29 1992-08-25 National Film Board Of Canada Method and system for determining the effects of exposure on recording and reproduction of optical sound records
US5237559A (en) * 1991-09-05 1993-08-17 Dolby Laboratories Licensing Corporation Reproduction of sound track signals by varying the detector threshold level as a function of the transverse scan position
EP0574901A2 (en) * 1992-06-16 1993-12-22 Kabushiki Kaisha Toshiba Image signal processor
US6031565A (en) * 1993-06-18 2000-02-29 Gte Internetworking Incorporated Stereo radiography
US5526075A (en) * 1993-09-13 1996-06-11 Digital Technology Systems Of California, Inc. Apparatus for reading analog sound tracks on film with circuit for averaging sound track boundaries to reduce the effect of noise
DE19737570C2 (en) 1997-08-28 2000-07-13 Philips Corp Intellectual Pty Film scanning and archiving
US6303411B1 (en) * 1999-05-03 2001-10-16 Vortek Industries Ltd. Spatially resolved temperature measurement and irradiance control
US6480615B1 (en) * 1999-06-15 2002-11-12 University Of Washington Motion estimation within a sequence of data frames using optical flow with adaptive gradients
EP1091573A3 (en) * 1999-10-08 2002-03-20 Philips Corporate Intellectual Property GmbH Method and apparatus for reproduction of optical sound recordings

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO0221821A2 *

Also Published As

Publication number Publication date
WO2002021821A3 (en) 2002-08-08
WO2002021821A2 (en) 2002-03-14
JP2004508603A (en) 2004-03-18
AU2002214955A1 (en) 2002-03-22
US20030165087A1 (en) 2003-09-04
US7400821B2 (en) 2008-07-15

Similar Documents

Publication Publication Date Title
EP0040796B1 (en) Method for the automatic differentiation between image and text or graphic regions on printed originals
DE2702934C2 (en) Method and device for testing photomasks
DE3134782C2 (en)
DE3438938A1 (en) IMAGE SIGNAL PRODUCTION DEVICE
CH628158A5 (en) METHOD AND DEVICE FOR TESTING COPY DOCUMENTS.
DE3507070A1 (en) FOCUS ERROR DETECTOR
DE2548833A1 (en) METHOD AND DEVICE FOR ELECTRO-OPTICAL SCANNING
DE102016216795A1 (en) Method for determining result image data
DE2753632C2 (en) Method and device for the selection of photographic originals which are not worth copying
DE2612751A1 (en) ENVELOPE MEASURING ARRANGEMENT
EP1317848A2 (en) Device and method for reproducing photographic sound recordings
DE2938385A1 (en) METHOD FOR REPRODUCTING MONOCHROME AND COLORED DOCUMENTS AND ELECTRO-OPTICAL SCANING DEVICE FOR CARRYING OUT THIS METHOD
CH683382A5 (en) Method for point and line by line copying a template.
DE3623294A1 (en) SYSTEM FOR BINARY CODING AN IMAGE
DE2146497B2 (en) Segmentation device for optical character readers
DE3035966A1 (en) METHOD FOR DETERMINING AN ADDITIONAL NEED FOR DEVELOPMENT SOLUTION
DE2752886C2 (en) Exposure head for an image display device
EP1091573A2 (en) Method and apparatus for reproduction of optical sound recordings
EP0753231B1 (en) Method and device for binarising pixel data
DE4415508A1 (en) Scanner with adaptation
DE2652954C2 (en) Device for the preliminary examination of master copies to determine whether they are worth copying
DE60320058T2 (en) Method, program and apparatus for image processing
DE3501571C2 (en) Method for setting a photographic copier
DE2555466C2 (en) Device for reading alphanumeric characters
DE3506736A1 (en) METHOD FOR CORRECTING IMAGE SIGNALS IN AN IMAGE INPUT DEVICE

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20030226

AK Designated contracting states

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

AX Request for extension of the european patent

Extension state: AL LT LV MK RO SI

RBV Designated contracting states (corrected)

Designated state(s): AT BE DE FR

17Q First examination report despatched

Effective date: 20070529

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20120301