WO2006093254A1 - テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム - Google Patents

テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム Download PDF

Info

Publication number
WO2006093254A1
WO2006093254A1 PCT/JP2006/304056 JP2006304056W WO2006093254A1 WO 2006093254 A1 WO2006093254 A1 WO 2006093254A1 JP 2006304056 W JP2006304056 W JP 2006304056W WO 2006093254 A1 WO2006093254 A1 WO 2006093254A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
coordinate position
correlation values
calculated
correlation
Prior art date
Application number
PCT/JP2006/304056
Other languages
English (en)
French (fr)
Inventor
Michikazu Hashimoto
Kiyoshi Tateishi
Original Assignee
Pioneer Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Corporation filed Critical Pioneer Corporation
Priority to US11/885,591 priority Critical patent/US8041123B2/en
Priority to JP2007506015A priority patent/JP4550110B2/ja
Publication of WO2006093254A1 publication Critical patent/WO2006093254A1/ja

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • G06V10/7515Shifting the patterns to accommodate for positional errors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H2001/2244Means for detecting or recording the holobject
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B7/00Recording or reproducing by optical means, e.g. recording using a thermal beam of optical radiation by modifying optical properties or the physical structure, reproducing using an optical beam at lower power by sensing optical properties; Record carriers therefor
    • G11B7/004Recording, reproducing or erasing methods; Read, write or erase circuits therefor
    • G11B7/0065Recording, reproducing or erasing by using optical interference patterns, e.g. holograms

Definitions

  • the present invention relates to a template matching processing device and method for performing template matching processing in image processing, a hologram playback device and method for reproducing information from a holographic recording medium, and these template matching processing devices and
  • the present invention relates to a computer program used in a holographic playback device.
  • template matching processing the template image is shifted pixel by pixel over the entire candidate point area in the detected image, and the correlation value between the template image and the detected image is calculated at each position, and the correlation value is maximized.
  • a processing method for obtaining the coordinate position is known.
  • Such template matching processing is executed when the position of the image is obtained by image processing, specifically, for example, when data is reproduced by a hologram reproduction technique. In such template matching processing, it is possible to obtain the position or displacement of the detected image in pixel units (pixel units).
  • Patent Document 1 discloses a technique for obtaining the position of a detected image in sub-pixel units using a multivariable polynomial regression surface.
  • Patent Document 2 discloses a technique for obtaining the position of a detected image in sub-pixel units using a difference or inclination between a maximum correlation value and a correlation value in the peripheral portion.
  • the correlation value between pixels is complemented by a linear method or a linear method based on the positional relationship between the maximum value of the correlation value and the correlation value in the periphery thereof, so that each pixel is sub-pixel-wise.
  • a technique for obtaining the position of the detected image is disclosed.
  • Patent Document 1 Japanese Patent Laid-Open No. 5-120436
  • Patent Document 2 Japanese Patent Laid-Open No. 10-124666
  • Patent Document 3 Japanese Patent Laid-Open No. 2001-195597 Disclosure of the invention
  • the present invention provides a template matching processing apparatus and method that does not require complicated operations while improving the accuracy of the template matching process, a hologram reproducing apparatus and method including such a template matching processing apparatus, and a computer. It is an object of the present invention to provide a computer program to be executed as a matching processing device and a hologram reproducing device.
  • the template matching processing apparatus of the present invention shifts the correlation value indicating the correlation between the input detection image and a predetermined template image, in units of pixels with respect to the detection image.
  • the coordinate position of the detected image is calculated on the basis of the first calculation means for calculating a plurality for each pixel unit and the coordinate position of the center of gravity of the plurality of correlation values (the center of gravity with the correlation value as a weight). Second calculating means.
  • the correlation value between the input detection image and the predetermined template image is calculated by the operation of the first calculation means.
  • the correlation value is calculated while shifting the template image to be compared with respect to the input image in units of pixels (that is, in units of pixels). That is, a plurality of correlation values are calculated according to the number of times the template image is shifted.
  • the correlation value at the one pixel position is relatively large.
  • the correlation value at the other pixel position is relatively small.
  • a plurality of values calculated by the first calculation means by the operation of the second calculation means is calculated based on the coordinate position of the center of gravity of the correlation value.
  • the detected image and the template image have the highest correlation at the coordinate position of the center of gravity. That is, based on the coordinate position of the center of gravity, for example, the position of a marker added in advance in the detected image as a reference for the position of the detected image is determined, and as a result, the coordinate position of the detected image is calculated.
  • the coordinate position of the detected image may be directly calculated, for example, as a coordinate on a predetermined plane or space, or may be indirectly calculated, for example, as a positional shift amount of the detected image of the reference position force.
  • the coordinate position of the center of gravity is calculated in units of sub-pixels exceeding the pixel unit (pixel unit) which is the resolution when the correlation value is actually calculated.
  • the template matching processing apparatus according to the present invention uses the center of gravity of the correlation value obtained from the correlation value rather than calculating the coordinate position of the detected image using only the correlation value actually calculated.
  • the coordinate position of the detected image is calculated.
  • the coordinate position of the detected image is calculated using the center of gravity that can be located in the gap between the correlation values calculated in units of pixels.
  • the template matching processing device can calculate the coordinate position of the detected image in sub-pixel units.
  • the center of gravity is calculated by a relatively simple calculation (for example, a simple calculation using the correlation value calculated by the first calculation means and the pixel position when the correlation value is calculated). Can do. Therefore, it also has the advantage of not requiring complicated calculations. In other words, it has the two major advantages of being able to reduce the processing load required while calculating the coordinate position of the detected image with high accuracy.
  • the first calculation means shifts the template image two-dimensionally in the vertical direction and the horizontal direction in units of pixels, and calculates the correlation value. calculate.
  • the template image is shifted two-dimensionally along the image plane of the detected image rather than being shifted one-dimensionally in one direction. Accordingly, a plurality of correlation values distributed two-dimensionally can be calculated. As a result, the center of gravity of the correlation value can be obtained more accurately. Thereby, the coordinate position of the detected image can be calculated with higher accuracy.
  • the second calculation means sets a minimum value of a curve or curved surface including a plurality of correlation values calculated by the first calculation means. After subtraction from each of the correlation values, the coordinate position of the detected image is calculated based on the coordinate position of the center of gravity of the plurality of subtracted correlation values.
  • the minimum value of a curve or curved surface including a plurality of correlation values (that is, predicted from the distribution of the plurality of correlation values calculated by the first calculation means) from each of the plurality of correlation values. After subtracting the minimum correlation value, the center of gravity is determined.
  • the calculation of the position where the correlation value is maximized becomes relatively accurate with a relatively simple calculation, and as a result, the coordinate position of the detected image can be made more accurate.
  • the second calculation unit determines a minimum value of the plurality of correlation values calculated by the first calculation unit as the plurality of correlation values. Then, the coordinate position of the detected image is calculated based on the coordinate position of the center of gravity of the plurality of subtracted correlation values.
  • the center of gravity is obtained after subtracting the actual minimum value from the plurality of correlation values calculated by the first calculation means from each of the plurality of correlation values.
  • the second calculation means includes a relatively small n number of correlation values calculated by the first calculation means (where n is The average value of the correlation values of 2 or more) is subtracted from each of the plurality of correlation values, and then the coordinate position of the detected image based on the coordinate position of the center of gravity of the plurality of correlation values subtracted. Is calculated.
  • n is The average value of the correlation values of 2 or more
  • the second calculation means includes a coordinate position corresponding to a maximum value of the plurality of correlation values and a coordinate of the center of the plurality of correlation values. Based on each of the positions, the coordinate position of the detected image is calculated.
  • the coordinate position of the detected image can be calculated with higher accuracy.
  • the first calculation means calculates a plurality of the correlation values for each pixel unit distributed in a matrix form.
  • a plurality of correlation values distributed in a matrix can be calculated.
  • the center of gravity of the correlation value can be obtained more accurately.
  • the coordinate position of the detected image can be calculated with higher accuracy.
  • the maximum value of the plurality of correlation values in both the column direction and row direction neighborhoods is determined to be smaller than the determining means among the correlation values for each column or row in a pixel unit distributed in the matrix.
  • the magnitude relationship between the correlation values located near both of the maximum correlation values is determined for each column or row in units of pixels by the operation of the determination unit. Based on the determination of the magnitude relationship, the correlation value at the end where the correlation value is located is extracted for each column or row in pixel units. For example, if one column is composed of 5 pixel units and the correlation value related to the 3rd pixel unit is maximum, the correlation values related to the 2nd and 4th pixel units will be small or large. A relationship is determined. If it is determined that the correlation value related to the fourth pixel unit is smaller than the correlation value related to the second pixel unit, the correlation value related to the fifth pixel unit is used as the end correlation value. Extracted.
  • the center of gravity is obtained after the average value of the correlation values of the plurality of end portions extracted for each column or row in pixel units is subtracted from each of the plurality of correlation values.
  • the first calculation unit uses the template image in which the distribution of the correlation values near the end portion is substantially flat, using the plurality of correlation values. May be calculated. [0026] With this configuration, the correlation values in the vicinity of the end portion are approximately the same, and as a result, the correlation value at the end portion can be identified with the minimum value of a plurality of correlation values. Therefore, the calculation for obtaining the center of gravity can be simplified, and as a result, the coordinate position of the detected image can be calculated more easily.
  • the template matching processing method of the present invention shifts the correlation value indicating the correlation between the input detection image and the predetermined template image in units of pixels with respect to the detection image.
  • the template matching processing method according to the present invention can also adopt various aspects.
  • a hologram reproducing apparatus of the present invention reproduces the recorded information from a holographic recording medium on which interference fringes formed from reference light and object light corresponding to the recorded information are recorded.
  • An image acquisition means for acquiring a detection image including the recording information based on detection light generated by the irradiation of the reference light, and a correlation value indicating a correlation between the detection image and a predetermined template image Based on the first calculation means for calculating a plurality of pixel units for each pixel unit while shifting the template image with respect to the detection image, and the coordinate position of the center of gravity of the plurality of correlation values.
  • a second calculating means for calculating the coordinate position of the detected image, and a distortion and a positional deviation of the detected image are reduced based on the coordinate position of the detected image calculated by the second calculating means.
  • the holographic recording medium is irradiated with the reference light. By doing so, detection light is obtained. Then, a detection image including recording information is acquired based on the detection light by the operation of the image acquisition means.
  • template matching is performed on the detected image by the operation of the above-described template matching processing apparatus (that is, the first calculation unit and the second calculation unit) according to the present invention. Thereafter, based on the coordinate position of the detected image, distortion and positional deviation of the detected image are corrected. Thereafter, the operation of the reproducing means demodulates the detected image after correction, and the recorded information is reproduced.
  • the above-described template matching processing apparatus that is, the first calculation unit and the second calculation unit
  • the coordinate position of the detected image can be calculated with high accuracy with a relatively low processing load, and the result is recorded on the holographic recording medium.
  • the recorded information can be suitably reproduced.
  • the hologram reproducing apparatus of the present invention reproduces the recorded information from a holographic recording medium on which interference fringes formed from reference light and object light corresponding to the recorded information are recorded.
  • An image acquisition step of acquiring a detection image including the recording information based on detection light generated by irradiation of the reference light, and a correlation value indicating a correlation between the detection image and a predetermined template image Based on the first calculation step of calculating a plurality of the template images for each pixel unit while shifting the template image with respect to the detection image, and the coordinate position of the center of gravity of the plurality of correlation values, A second calculation step of calculating a coordinate position of the detection image, and a distortion and a positional deviation of the detection image based on the coordinate position of the detection image calculated by the second calculation unit.
  • the hologram reproducing method according to the present invention can also adopt various aspects.
  • the first computer program of the present invention provides the above-described present invention.
  • a computer program for hologram reproduction control for controlling a computer provided in a bright template matching processing apparatus (including various aspects thereof), the computer comprising the first calculation means and the second calculation It functions as at least a part of the means.
  • the second computer program of the present invention is a hologram reproduction control computer for controlling a computer provided in the hologram reproduction apparatus of the present invention described above (including various aspects thereof).
  • each computer program of the present invention if the computer program is read from a recording medium such as a ROM, a CD-ROM, a DVD-ROM, and a hard disk storing the computer program, the computer program is executed.
  • the computer program is executed after being downloaded to a computer via communication means, the above-described template matching processing apparatus or hologram reproducing apparatus of the present invention can be realized relatively easily.
  • each computer program of the present invention can also adopt various aspects.
  • the first computer program product in the computer-readable medium can be executed by a computer provided in the above-described template matching processing apparatus of the present invention (including various aspects thereof) in order to solve the above-mentioned problem.
  • a program instruction is clearly defined, and the computer is caused to function as at least part of the first calculation means and the second calculation means.
  • a second computer program product in a computer-readable medium is a program instruction executable by a computer provided in the above-described hologram reproducing device of the present invention (including various aspects thereof).
  • the computer is caused to function as at least a part of the image acquisition means, the first calculation means, the second calculation means, the correction means, and the reproduction means.
  • each computer program product of the present invention from a recording medium such as ROM, CD-ROM, DVD-ROM, and hard disk storing the computer program product, If the computer program product is read into a computer, or if the computer program product, which is a transmission wave, for example, is downloaded to a computer via communication means, the above-described template matching processing device or hologram reproduction device of the present invention is obtained. It can be implemented relatively easily. More specifically, the computer program product may be composed of a computer-readable code (or computer-readable instruction) that functions as the template matching processing device or hologram reproducing device of the present invention described above. .
  • the first calculation means and the second calculation means, or the first calculation process and the second calculation process are provided.
  • the image acquiring means, the first calculating means, the second calculating means, the correcting means and the reproducing means, or the image acquiring process, the first calculating process, the second calculating process, A correction process and a regeneration process are provided. Therefore, it does not require complicated operations while improving the accuracy of the template matching process.
  • FIG. 1 shows a configuration of an optical system of a hologram recording / reproducing apparatus according to an embodiment of the present invention.
  • FIG. 2 shows an example of a two-dimensional digital modulation system for recorded data.
  • FIG. 3 is a block diagram showing a schematic configuration of a signal processing system of the hologram recording / reproducing apparatus in the first embodiment.
  • FIG. 4 is a timing chart conceptually describing the waveform and timing of a signal when reproducing recorded data in association with the image sensor in the pickup.
  • FIG.5 An example of a spatially modulated image pattern including a marker.
  • FIG. 6 is a flowchart conceptually showing the flow of template matching processing according to the present embodiment.
  • FIG. 7 is a plan view conceptually showing the relationship between a template image and a reproduced image when calculating a correlation value.
  • FIG. 8 is a graph conceptually showing an example of a calculated correlation value distribution.
  • FIG. 9 is an explanatory diagram in which two-dimensionally calculated correlation values are arranged in a matrix.
  • FIG. 10 is another explanatory diagram in which two-dimensionally calculated correlation values are arranged in a matrix.
  • FIG. 11 is a plan view conceptually showing one shape of a marker, and is a graph conceptually showing an aspect of correlation value distribution when the marker is used.
  • FIG. 12 is a plan view conceptually showing another shape of the marker, and is a graph conceptually showing the distribution form of the correlation value when the marker is used.
  • FIG. 13 is a graph conceptually showing an example of a correlation value distribution.
  • FIG. 14 is a contour map conceptually showing one aspect of a three-dimensional distribution of correlation values.
  • FIG. 15 is a contour map conceptually showing another aspect of the three-dimensional distribution of correlation values.
  • FIG. 16 is an explanatory diagram conceptually showing another example when calculating a reference value.
  • FIG. 1 shows the configuration of an optical system arranged in the pickup of the hologram recording / reproducing apparatus according to the present embodiment
  • FIG. 2 shows an example of a two-dimensional digital modulation system of recorded data
  • FIG. FIG. 4 is a block diagram showing a schematic configuration of a signal processing system of the hologram recording / reproducing apparatus of the present embodiment
  • FIG. 4 corresponds to a signal waveform and its timing when reproducing recorded data with an imaging sensor in the pickup. It is a timing chart which attaches and describes conceptually.
  • the pickup 10 includes a recording / reproducing laser 11 that generates laser light for recording and reproducing data.
  • the beam diameter of the light beam Lo emitted from the recording / reproducing laser 11 is expanded by a beam expander constituted by the lenses 12 and 13 and is input to the spatial modulator 14.
  • the spatial modulator 14 can be constituted by a liquid crystal element, for example, and has a plurality of pixels arranged in a lattice shape.
  • the spatial modulator 14 displays a pattern of white pixels and black pixels obtained by two-dimensional digital modulation of input data to be recorded, and spatially modulates the light beam with the pattern.
  • FIG. 2 shows an example of two-dimensional digital modulation by the spatial modulator 14.
  • digital input data that is, “0” and “1” of the input data to be recorded on the recording medium 1 are expressed by combinations of white pixels and black pixels, respectively.
  • An array in which white and black pixels are arranged in the vertical direction corresponds to input data “0”
  • an array in which black and white pixels are arranged in the vertical direction corresponds to input data “1”.
  • This example is called 1: 2 differential modulation because it converts 1-bit input data into 2-bit (2-pixel) 2-dimensional modulation data.
  • Two-dimensional modulation data obtained by two-dimensional digital conversion of the input data "00101101" by this modulation method is shown as output modulation data in Fig. 2 (b). That is, a modulated image pattern composed of the white pixels and black pixels is displayed on the spatial modulator 14 as output modulation data.
  • the light beam Lo incident on the spatial modulator 14 is transmitted through the white pixel portion of the spatially modulated image pattern and blocked at the black pixel portion, and thus is optically modulated from the spatial modulator 14 by the spatially modulated image pattern. Light beam Lo is emitted.
  • the above example is an example of spatial modulation, and application of the present invention is not limited to the above modulation method.
  • 2-bit input data is converted into 4-bit 2D modulation data, such as the so-called 2: 4 modulation method
  • the input data is converted into a 2D modulation image pattern
  • the spatial light modulator is driven to spatially distribute the light flux.
  • Any two-dimensional digital modulation method may be used as long as it can be modulated.
  • the light beam Lo spatially modulated by the spatial modulator 14 passes through the half mirror 15, is condensed by the objective lens 18, and is applied to the holographic recording medium 1.
  • a mirror 19 is provided behind the recording medium 1 (on the side opposite to the objective lens 18), and the light beam Lo collected by the objective lens 18 passes through the recording medium 1 and then passes through the mirror 19. It is reflected and enters the recording medium again. Therefore, the light beam directly incident from the objective lens 18 and the incident light beam reflected by the mirror 19 form interference fringes in the recording medium 1 and are recorded on the recording medium 1.
  • the light beam Lo reflected by the mirror 19 and incident on the recording medium 1 is reflected by the half mirror 15 and received by the two-dimensional sensor 16.
  • the two-dimensional sensor 16 can be, for example, a CCD array or a CMOS sensor, and outputs an electrical signal corresponding to the amount of incident light.
  • the spatial modulator 14 is controlled to a non-modulation state (that is, an all-light transmission state). Therefore, the light beam Lo emitted from the recording / reproducing laser 11 passes through the half mirror 15 and the objective lens 18 without being modulated by the spatial modulator 14, and is irradiated onto the recording medium 1. This light becomes reproduction reference light.
  • detection light is generated by the reproduction reference light and the interference fringes recorded on the recording medium 1, passes through the objective lens 18, is reflected by the half mirror 15, and enters the two-dimensional sensor 16. In this way, a spatially modulated image pattern of monochrome pixels generated by the spatial modulator 14 during recording is imaged on the two-dimensional sensor 16, and reproduction corresponding to the input data recorded by detecting this pattern is performed. Data is obtained.
  • the hologram recording / reproducing apparatus includes a reproduced image memory 41, a distortion correction circuit 42, a decoding circuit 43, and a position detection circuit 44.
  • the reproduced image memory 41 temporarily stores output data (reproduced image) output from the two-dimensional sensor 16 provided in the optical pickup 10. Specifically, a reproduction image generated from the return light beam of the reproduction light beam Lo irradiated to the disk-shaped recording medium 1 whose rotation is controlled by the spindle motor 8 is stored. The stored replay image pattern is output to each of the distortion correction circuit 42 and the position detection circuit 44.
  • the distortion correction circuit 42 performs distortion correction on the reproduction image output from the reproduction image memory 41 based on the positional deviation amount of the reproduction image pattern output from the position detection circuit 44. Do. As a result, one page of recorded data is specified.
  • the distortion correction circuit 42 performs, for example, geometric correction as a specific example of distortion correction.
  • Geometric correction refers to correcting pixel position shifts during data recording and data reproduction.
  • the image pattern is transferred from the spatial modulator 14 to the recording medium 1 at the time of recording, and to the recording medium 1 force and the two-dimensional sensor 16 at the time of reproduction through the optical system.
  • the difference in magnification and distortion of the optical system and the shrinkage of the medium occur during recording and during reproduction.
  • the pixel position on the spatial modulator 14 during recording and the pixel position on the two-dimensional sensor 16 during reproduction are recorded. It's almost impossible to match perfectly. For this reason, geometric correction is performed for each page of recorded data. More specifically, it is included in the reproduction image pattern based on the deviation between the original marker position on the spatial modulator 14 and the marker position detected in the reproduction image pattern, calculated by the position detection circuit 44. Correct each pixel position.
  • the position of the pixel on the spatial modulator 14 at the time of recording and the position of the pixel on the two-dimensional sensor 16 at the time of reproduction (that is, the position of each light receiving element) If they do not match, there is a possibility that the detected light force to be incident on one pixel of the two-dimensional sensor 16 may be incident on another pixel of the two-dimensional sensor 16. More specifically, the detection light to be incident on the first light receiving element (first pixel) and the third light receiving element (third pixel) of the two-dimensional sensor 16 is the 0th light receiving element of the two-dimensional sensor 16. In addition, the light may enter each of the second light receiving elements.
  • the output of the two-dimensional sensor is not binary data that should be expected, and as a result, it becomes difficult to properly demodulate the detected light into the original recording data.
  • the decoding circuit 43 demodulates the reproduced image pattern that has been subjected to distortion correction in the distortion correction circuit 42, and outputs it as reproduction data.
  • data demodulation is performed using a demodulation method corresponding to the two-dimensional digital modulation method applied by the spatial modulator 14 during recording, and reproduction data corresponding to the recorded data is output.
  • the playback data is then post-processed including error correction, dinter leave, descrambling, etc., and played back as actual data.
  • the position detection circuit 44 detects the coordinate position of the reproduction image pattern (or the positional deviation amount of the reproduction image, distortion of the reproduction image, etc.) from the position of the marker included in the reproduction image.
  • the detection of the coordinate position and the like of the reproduced image pattern is performed by a template matching process described in detail later.
  • the position detection circuit 44 includes a correlation value calculation unit 441 constituting a specific example of the “first calculation unit” of the present invention and a specific example of the “second calculation unit” of the present invention.
  • the center-of-gravity calculation unit 442 constituting the example and the image position calculation unit 443 constituting a specific example of the “second calculation means” of the present invention are provided. Details of the operation of each of these components will be described later.
  • the recording signal of the hologram memory records data with a marker serving as a reference of the position of the spatial modulation image pattern added to the spatial modulation image pattern.
  • the marker is information for identifying one unit (one page) of recording data recorded on the recording medium 1, and is usually configured as an image portion having a predetermined shape.
  • FIG. 5 shows an example of a spatially modulated image pattern including a marker.
  • a spatially modulated image pattern 50 is displayed at the approximate center in the display area of the spatial modulator 14.
  • T-shaped markers 52 are displayed at the four corners in the display area of the spatial modulator 14 outside the spatial modulation image pattern 50.
  • the spatial modulator 14 is a recording signal (not shown)
  • the input data received from the processing system is spatially modulated as described above to generate a spatially modulated image pattern 50, which is displayed in the display area of the spatial modulator 14 as shown in FIG.
  • the spatial modulator 14 displays a predetermined marker 52 at a predetermined position in the display area.
  • the display image pattern 54 including the spatial modulation image pattern 50 and the marker 52 is displayed in the display area of the spatial modulator 14.
  • the reproduced image pattern output from the two-dimensional sensor 16 has a digital value corresponding to the display image pattern 54 displayed on the spatial modulator 14 at the time of recording. Therefore, when the position detection unit 44 detects the position of the marker, one page of the recording data is extracted. The marker position is detected by matching the reproduced image pattern with an image pattern (a template image described later) constituting the marker.
  • FIG. 6 is a flowchart conceptually showing a flow of the template matching process according to the present embodiment.
  • the correlation value indicating the correlation between the reproduced image pattern and the template image is calculated by the operation of the correlation value calculation unit 441. (Step S101).
  • FIG. 7 is a plan view conceptually showing the relationship between the template image and the reproduced image pattern when calculating the correlation value
  • FIG. 8 is a conceptual diagram showing an example of the distribution of the calculated correlation value.
  • FIGS. 9 and 10 are explanatory diagrams in which correlation values calculated two-dimensionally are arranged in a matrix.
  • the reproduced image pattern 61 is an image pattern corresponding to the displayed image pattern 54 displayed on the spatial modulator 14 at the time of recording (however, for convenience of illustration, only the area of the reproduced image pattern is displayed. The contents of the reproduced image pattern itself are not shown).
  • the template image 62 is an image pattern corresponding to the marker 52 used at the time of recording. The correlation value between the playback image pattern 61 and the template image 62 is calculated. At this time, as shown in FIG. 7, the template image 62 is moved in the X direction and the Y direction in pixel units on the reproduced image pattern 61, and the correlation value between them is calculated. The larger the calculated correlation value, the higher the possibility that a marker 52 is added at that position.
  • the correlation values “C” distributed discretely as shown in FIG. 8 are calculated. .
  • the coordinate position of the template image 62 is the upper left coordinates (a, b) of the template image 62 as shown in FIG.
  • the maximum correlation value calculated by actually moving the template image 62 is “C”.
  • the largest correlation value (or its position) in the correlation value distribution is calculated.
  • the correlation value "C" distributed two-dimensionally is calculated as shown in Fig. 9. Specifically, the template image 62 is calculated.
  • the correlation value "C" is calculated and the coordinate position of the template image 62 is calculated.
  • the correlation value “C” is calculated, and the coordinate position of the template image 62 is (X, Y).
  • the correlation value “C” is calculated, and the coordinate position of the template image 62 is (X, Y).
  • the correlation value “C” is calculated, and when the coordinate position of the template image 62 is (X, Y)
  • 20 2 1 is calculated when the correlation value “C” is calculated and the coordinate position of the template image 62 is (X, Y).
  • the flat portion of the correlation value is determined by the operation of the centroid calculating unit 442 (step S102). Specifically, a flat section of the distribution of correlation values is determined. This determination will be specifically described with reference to FIG.
  • the correlation values in the vicinity of both are compared for each column and row of the matrix. Specifically, in the row direction
  • the correlation value is a force that protrudes and increases in the portion of the reproduced image pattern 61 where the marker 52 is added, and takes the property that it takes almost the same value in the other portions. ing.
  • the correlation value is prominent in the part where the marker 52 is added, and the correlation value is high in other parts. It is preferable to use a marker 52 having such a shape.
  • the marker 52 shown in FIGS. 11 and 12 is shown as a specific example.
  • FIG. 11 and FIG. 12 are plan views showing specific shapes of the marker 52. 6 is a graph conceptually showing a distribution pattern of correlation values when force 52 is used.
  • the distribution of correlation values is shown in the graph on the right side of FIG. 11 or the graph on the right side of FIG. In both of these graphs, the correlation value is prominently high in the portion of the reproduced image pattern 61 where the marker 52 is added (the portion where the positional deviation amount is 0), but in the other portions, the correlation value is high.
  • the values are almost the same. Therefore, by using such a marker 52, the template matching process in the present embodiment can be suitably performed.
  • an area determined to be a flat portion is referred to as a peripheral area, and the other area is referred to as a gravity center area.
  • the reference value B of a plurality of correlation values is calculated by the operation of the centroid calculating unit 442 (step S103).
  • the reference value B is subtracted from each of the plurality of correlation values in the centroid region by the operation of the centroid calculation unit 442, and the subtracted correlation value is set as a new correlation value (step S104).
  • the correlation values in the peripheral area are set to “0.” Clearing the peripheral area to “0” is preferable because the number of arithmetic processes shown below can be shortened and speeded up. The calculation of the peripheral area is omitted.
  • the center of gravity of the correlation value is calculated (step S105). Specifically, the coordinate position in the X direction of the center of gravity (in this case, the relative coordinate position based on the coordinate position of the maximum correlation value calculated by actually moving the template image 62) "X "Is expressed by Equation 1, and the coordinate position in the Y direction of the center of gravity (in this case, the relative coordinate position based on the coordinate position of the maximum correlation value calculated by actually moving the template image 62) ) “Y” is expressed by Equation 2.
  • the relative coordinates of the center of gravity. , Y c ) is the decimal point coordinate.
  • the coordinate of the maximum value among a plurality of correlation values that have already been specified is set as an integer coordinate. Therefore, the sum of the decimal point coordinate and the integer coordinate is obtained as the absolute position coordinate. It turns out that this absolute position coordinate becomes a detection position having the resolution of the sub-pixel with the maximum correlation value. That is, it is found that the marker 52 is added to this coordinate position in the reproduced image pattern 61, and as a result, the coordinate position, distortion, positional deviation, etc. of the reproduced image pattern 61 can be calculated (step).
  • Pu S 106 the coordinate position, distortion, positional deviation, etc. of the reproduced image pattern 61 can be calculated (step).
  • FIG. 13 is a graph conceptually showing an example of the correlation value distribution.
  • the description will proceed assuming that the correlation value originally distributed two-dimensionally is one-dimensionally distributed in the X direction.
  • the same explanation holds in the Y direction.
  • the correlation value for obtaining “z” uses the property that an isosceles triangle is formed with the centroid of the correlation value as a vertex.
  • the correlation value graph shown in FIG. 13 (a) can be rewritten into a graph as shown in FIG. 13 (b) by moving the center of gravity on the central axis.
  • the coordinate position in the X direction is indicated as a relative coordinate position based on the coordinate position of the center of gravity. Since the interval between the coordinate positions of each correlation value is one pixel, for example, the coordinate position of the correlation value “C” is “one 2 +
  • the correlation value is obtained after subtracting "C" from each correlation value.
  • Equations 1 and 2 are obtained.
  • FIG. 14 and FIG. 15 are contour diagrams conceptually showing the manner of the three-dimensional distribution of correlation values.
  • the correlation value increases as it approaches the central portion of the contour map (that is, the inner contour line).
  • the vertex is obtained by calculating the center of gravity of the values of the respective grid points (sample points in the two-dimensional space) in FIG. 14 and FIG.
  • the coordinate position can be calculated only in units of the respective lattice points in FIGS.
  • the coordinate position of the center of gravity located between the lattice points can be calculated, and as a result, the coordinate position in units of subpixels can be calculated.
  • the coordinate position of the reproduced image pattern 61 can be calculated with higher accuracy. Therefore, it can be repeated with higher accuracy. Distortion and positional deviation of the raw image pattern 61 can be corrected.
  • the reproduced image pattern 61 can be demodulated more suitably, and the reproduction quality of recorded data can be further improved.
  • the center of gravity can be calculated by a relatively simple calculation. Therefore, for example, there is an advantage that it is not necessary to perform a complicated operation such as an operation related to the multivariable polynomial regression surface shown in Patent Document 1. In other words, it has the two major advantages of being able to reduce the processing load required while calculating the coordinate position of the reproduced image with high accuracy.
  • the center of gravity is calculated after subtracting the reference value B from each of a plurality of correlation values. For this reason, it is sufficient to calculate the importance in consideration of the correlation value in the center of gravity region in the matrix shown in FIGS. In other words, the center of gravity can be suitably calculated without considering the correlation value in the surrounding area. As a result, the processing load required for the template matching process can be further reduced and speeded up.
  • the reference value B is not limited to the force that is the average value of the correlation values in the surrounding area.
  • the average value of the lower nine correlation values out of 25 correlation values may be used as the reference value B.
  • the minimum correlation value estimated from the distribution of 25 correlation values may be used as the reference value B.
  • the minimum value of 25 correlation values may be used as the reference value B.
  • other suitable values may be used as the reference value.
  • the present invention is not limited to the above-described embodiments, but can be appropriately modified within the scope of the claims and the entire specification without departing from the gist or philosophy of the invention which can be read.
  • a template matching processing device and method, a hologram reproducing device and method, and a computer program are also included in the technical scope of the present invention.
  • the template matching processing device and method, the hologram reproducing device and method, and the computer program according to the present invention can be used, for example, in a template matching processing device that performs template matching processing in image processing, and further, holographic recording.
  • the present invention can be used for a hologram reproducing apparatus that reproduces information on a medium.
  • the present invention can also be used for a template matching processing device and a hologram reproducing device that are mounted on or can be connected to various computer devices for consumer use or business use.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Holo Graphy (AREA)
  • Image Analysis (AREA)

Abstract

 テンプレートマッチング処理装置は、入力される検出画像(61)と所定のテンプレート画像(62)との相関関係を示す相関値を、検出画像に対してテンプレート画像を画素単位でずらしつつ、画素単位毎に複数算出する第1算出手段(441)と、複数の相関値の重心の座標位置に基づいて、検出画像の座標位置を算出する第2算出手段(442、443)とを備える。

Description

明 細 書
テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法 、並びにコンピュータプログラム
技術分野
[0001] 本発明は、画像処理におけるテンプレートマッチング処理を行うテンプレートマッチ ング処理装置及び方法、ホログラフィック記録媒体に対して情報の再生を行うホログ ラム再生装置及び方法、並びにこれらのテンプレートマッチング処理装置及びホログ ラム再生装置に用いられるコンピュータプログラムに関する。
背景技術
[0002] 従来、テンプレートマッチング処理として、テンプレート画像を検出画像内の候補点 領域全体に渡って 1画素ずつずらしながら、夫々の位置においてテンプレート画像と 検出画像の相関値を算出し、相関値が最大となる座標位置を求める処理方法が知ら れている。係るテンプレートマッチング処理は、画像処理にて画像の位置を求める際 に実行され、具体的には例えばホログラム再生技術にてデータを再生する際に実行 される。係るテンプレートマッチング処理では、検出画像の画素単位(ピクセル単位) での位置ないしは位置ズレを求めることができる。
[0003] 他方、テンプレートマッチング処理の精度をより向上させる試みがなされている。例 えば、特許文献 1には、多変数多項式回帰曲面を用いて、サブピクセル単位での検 出画像の位置を求める技術が開示されている。また、特許文献 2には、相関値の最 大値とその周辺部の相関値との差ないしは傾きを用いて、サブピクセル単位での検 出画像の位置を求める技術が開示されている。また、特許文献 3には、相関値の最 大値とその周辺部の相関値との位置関係から、画素間の相関値を直線式ないしは曲 線式にて補完することで、サブピクセル単位での検出画像の位置を求める技術が開 示されている。
[0004] 特許文献 1 :特開平 5— 120436号公報
特許文献 2:特開平 10— 124666号公報
特許文献 3:特開 2001— 195597号公報 発明の開示
発明が解決しょうとする課題
[0005] し力しながら、これらの技術は、テンプレートマッチング処理の精度を向上させようと すればするほど、複雑な演算を行う必要があり、実用的でないないしはコストがかか るという技術的な問題点を有している。
[0006] 本発明が解決しょうとする課題には上記のようなものが一例として挙げられる。本発 明は、テンプレートマッチング処理の精度を向上させつつ、複雑な演算を必要としな いテンプレートマッチング処理装置及び方法、このようなテンプレートマッチング処理 装置を備えるホログラム再生装置及び方法、並びにコンピュータを該テンプレートマ ツチング処理装置及びホログラム再生装置として実行させるコンピュータプログラムを 提供することを課題とする。
課題を解決するための手段
[0007] (テンプレートマッチング処理装置)
本発明のテンプレートマッチング処理装置は上記課題を解決するために、入力され る検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検出画像 に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に複数算 出する第 1算出手段と、前記複数の相関値の重心 (相関値を重みとする重心)の座 標位置に基づいて、前記検出画像の座標位置を算出する第 2算出手段とを備える。
[0008] 本発明のテンプレートマッチング処理装置によれば、第 1算出手段の動作により、 入力される検出画像と所定のテンプレート画像との相関値が算出される。このとき、 入力される画像に対して、比較の対象となるテンプレート画像を画素単位で (即ち、 ピクセル単位で)ずらしながら相関値が算出される。即ち、テンプレート画像をずらし た回数に応じて複数の相関値が算出される。テンプレート画像と同一ないしは類似し ている画像が検出画像中の一の画素位置に含まれる場合には、該一の画素位置に おける相関値は相対的に大きくなる。他方、テンプレート画像と同様ないしは類似し ている画像が検出画像中の他の画素位置に含まれていない場合には、該他の画素 位置における相関値は相対的に小さくなる。
[0009] 本発明では特に、第 2算出手段の動作により、第 1算出手段により算出された複数 の相関値の重心の座標位置に基づいて、検出画像の座標位置が算出される。具体 的には、この重心の座標位置において、検出画像とテンプレート画像とが最も高い相 関関係を有している。つまり、重心の座標位置に基づいて例えば検出画像の位置の 基準として検出画像中に予め付加されているマーカの位置が判明し、その結果検出 画像の座標位置が算出される。この検出画像の座標位置は、例えば所定平面ないし は空間上における座標として直接的に算出されてもよいし、或いは例えば基準位置 力 の検出画像の位置ズレ量として間接的に算出されてもよい。
[0010] この場合、重心の座標位置は、実際に相関値が算出される際の分解能である画素 単位(ピクセル単位)を超えて、サブピクセル単位で算出される。というのも、本発明に 係るテンプレートマッチング処理装置は、実際に算出される相関値のみを用いて検 出画像の座標位置を算出するのではなぐその相関値から得られる相関値の重心を 用いて検出画像の座標位置を算出しているためである。言い換えれば、画素単位で 算出される相関値の間隙に位置し得る重心を用いて検出画像の座標位置を算出し ているためである。これにより、本発明に係るテンプレートマッチング処理装置は、サ ブピクセル単位での検出画像の座標位置を算出することができる。
[0011] カロえて、重心は比較的簡単な演算 (例えば、第 1算出手段により算出される相関値 とその相関値が算出される場合の画素位置等を用いた簡単な演算)で算出すること ができる。従って、複雑な演算を行う必要がないという利点をも併せ持つている。つま り、検出画像の座標位置を高精度に算出しつつも、それに要する処理負荷を低減す ることができるという二つの大きな利点を併せ持つている。
[0012] 本発明のテンプレートマッチング処理装置の一の態様では、前記第 1算出手段は、 前記テンプレート画像を前記画素単位で縦方向及び横方向に向かって二次元的に ずらしつつ、前記相関値を算出する。
[0013] この態様によれば、テンプレート画像は、単に一の方向に向かって一次元的にずら されるのではなぐ検出画像の画像面に沿って二次元的にずらされる。従って、二次 元的に分布する複数の相関値を算出することができる。その結果、相関値の重心は より正確に求められる。これにより、検出画像の座標位置をより高精度に算出すること ができる。 [0014] 本発明のテンプレートマッチング処理装置の他の態様は、前記第 2算出手段は、前 記第 1算出手段により算出される複数の相関値を含む曲線又は曲面の最小値を前 記複数の相関値の夫々から減算した後に、該減算された複数の相関値の前記重心 の座標位置に基づいて前記検出画像の座標位置を算出する。
[0015] この態様によれば、複数の相関値の夫々から、複数の相関値を含む曲線又は曲面 の最小値 (即ち、第 1算出手段により算出される複数の相関値の分布から予想される 相関値の最小値)を減算した後に、重心が求められる。この減算処理を行うことにより
、比較的簡易な演算で、相関値が最大となる位置の演算がより正確なものとなり、そ の結果、検出画像の座標位置をより高精度にすることができる。
[0016] 本発明のテンプレートマッチング処理装置の他の態様は、前記第 2算出手段は、前 記第 1算出手段により算出される複数の相関値のうちの最小値を前記複数の相関値 の夫々から減算した後に、該減算された複数の相関値の前記重心の座標位置に基 づいて前記検出画像の座標位置を算出する。
[0017] この態様によれば、複数の相関値の夫々から、第 1算出手段により算出される複数 の相関値中の実際の最小値を減算した後に、重心が求められる。この減算処理を行 うことにより、比較的簡易な演算で、相関値が最大となる位置の演算がより正確なもの となり、その結果、検出画像の座標位置をより高精度にすることができる。
[0018] 本発明のテンプレートマッチング処理装置の他の態様は、前記第 2算出手段は、前 記第 1算出手段により算出される複数の相関値のうち相対的に小さい n個(但し、 nは 2以上の整数)の相関値の平均値を前記複数の相関値の夫々力 減算した後に、該 減算された複数の相関値の前記重心の座標位置に基づレ、て前記検出画像の座標 位置を算出する。この減算処理を行うことにより、比較的簡易な演算で、相関値が最 大となる位置の演算がより正確なものとなり、その結果、検出画像の座標位置をより 高精度にすることができる。
[0019] 本発明のテンプレートマッチング処理装置の他の態様は、前記第 2算出手段は、前 記複数の相関値のうちの最大値に相当する座標位置及び前記複数の相関値の重 心の座標位置の夫々に基づいて、前記検出画像の座標位置を算出する。
[0020] この態様によれば、検出画像の座標位置をより高精度に算出することができる。 [0021] 本発明のテンプレートマッチング処理装置の他の態様は、前記第 1算出手段は、マ トリタス状に分布する画素単位毎に複数の前記相関値を算出する。
[0022] この態様によれば、マトリクス状に分布する複数の相関値を算出することができる。
その結果、相関値の重心はより正確に求められる。これにより、検出画像の座標位置 をより高精度に算出することができる
上述の如くマトリクス状に分布する画素単位毎に複数の相関値を算出するテンプレ ートマッチング処理装置の態様では、前記複数の相関値のうちの最大値の列方向及 び行方向の夫々の両近傍の二つの相関値の大小関係を判定する判定手段を更に 備え、前記第 2算出手段は、前記マトリクス状に分布する画素単位の列又は行毎の 相関値のうち、前記判定手段により小さいと判定された相関値が位置する側の端部 の相関値の平均値を前記複数の相関値の夫々から減算した後に、該減算された複 数の相関値の前記重心の座標位置に基づいて前記検出画像の座標位置を算出す るように構成してもよい。
[0023] このように構成すれば、判定手段の動作により、画素単位の列又は行毎に、相関値 の最大値の両近傍に位置する相関値の大小関係が判定される。大小関係の判定に 基づレ、て、画素単位の列又は行毎に、小さレ、相関値が位置する側の端部の相関値 が抽出される。例えば、 1つの列が 5つの画素単位から構成されており、且つ 3つ目 の画素単位に係る相関値が最大であれば、 2つ目及び 4つ目の画素単位に係る相 関値の大小関係が判定される。 4つ目の画素単位に係る相関値の方が 2つ目の画素 単位に係る相関値よりも小さいと判定されれば、端部の相関値として 5つ目の画素単 位に係る相関値が抽出される。
[0024] このように、画素単位の列又は行毎に抽出された複数の端部の相関値の平均値が 複数の相関値の夫々力 減算された後に、重心が求められる。この減算処理を行うこ とにより、比較的簡易な演算で、相関値が最大となる位置の演算がより正確なものと なり、その結果、検出画像の座標位置をより高精度にすることができる。
[0025] 上述の如く判定手段を備えるテンプレートマッチング処理装置の態様では、前記第 1算出手段は、前記端部付近の相関値の分布が略平坦になる前記テンプレート画像 を用いて前記複数の相関値を算出するように構成してもよい。 [0026] このように構成すれば、端部付近の相関値は概ね同一となり、結果として端部の相 関値を複数の相関値の最小値と同一視することができる。従って、重心を求める際の 演算をより簡易なものとすることができ、その結果、検出画像の座標位置をより容易に 算出することができる。
[0027] (テンプレートマッチング処理方法)
本発明のテンプレートマッチング処理方法は上記課題を解決するために、入力され る検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検出画像 に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に複数算 出する第 1算出工程と、前記複数の相関値の重心の座標位置に基づいて、前記検 出画像の座標位置を算出する第 2算出工程とを備える。
[0028] 本発明のテンプレートマッチング処理方法によれば、上述した本発明のテンプレー トマッチング処理装置が有する各種利益と同様の利益を享受することが可能となる。
[0029] 尚、上述した本発明のテンプレートマッチング処理装置における各種態様に対応し て、本発明に係るテンプレートマッチング処理方法も各種態様を採ることが可能であ る。
[0030] (ホログラム再生装置)
本発明のホログラム再生装置は上記課題を解決するために、参照光と記録情報に 対応する物体光とから形成される干渉縞が記録されたホログラフィック記録媒体から 前記記録情報を再生するホログラム再生装置であって、前記参照光の照射により発 生する検出光に基づいて、前記記録情報を含む検出画像を取得する画像取得手段 と、前記検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検 出画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に 複数算出する第 1算出手段と、前記複数の相関値の重心の座標位置に基づいて、 前記検出画像の座標位置を算出する第 2算出手段と、前記第 2算出手段により算出 された前記検出画像の座標位置に基づいて、前記検出画像の歪み及び位置ズレの 少なくとも一方を補正する補正手段と、前記歪み及び位置ズレの少なくとも一方が補 正された検出画像に含まれる前記記録情報を再生する再生手段とを備える。
[0031] 本発明のホログラム再生装置によれば、参照光をホログラフィック記録媒体へ照射 することで検出光が得られる。そして、画像取得手段の動作により、検出光に基づい て、記録情報が含まれている検出画像が取得される。
[0032] 本発明では特に、この検出画像に対して、上述した本発明に係るテンプレートマツ チング処理装置 (即ち、第 1算出手段及び第 2算出手段)の動作によりテンプレートマ ツチングが行なわれる。その後、検出画像の座標位置に基づいて、検出画像の歪み や位置ズレ等が補正される。その後、再生手段の動作により、補正後の検出画像に 対して復調等が行われ、記録情報が再生される。
[0033] 従って、上述した本発明に係るテンプレートマッチング処理装置と同様に、比較的 低処理負荷で検出画像の座標位置を高精度に算出することができ、その結果ホログ ラフィック記録媒体に記録された記録情報を好適に再生することができる。
[0034] (ホログラム再生装置)
本発明のホログラム再生装置は上記課題を解決するために、参照光と記録情報に 対応する物体光とから形成される干渉縞が記録されたホログラフィック記録媒体から 前記記録情報を再生するホログラム再生方法であって、前記参照光の照射により発 生する検出光に基づいて、前記記録情報を含む検出画像を取得する画像取得工程 と、前記検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検 出画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に 複数算出する第 1算出工程と、前記複数の相関値の重心の座標位置に基づいて、 前記検出画像の座標位置を算出する第 2算出工程と、前記第 2算出手段により算出 された前記検出画像の座標位置に基づいて、前記検出画像の歪み及び位置ズレの 少なくとも一方を補正する補正工程と、前記歪み及び位置ズレの少なくとも一方が補 正された検出画像に含まれる前記記録情報を再生する再生工程とを備える。
[0035] 本発明のホログラム再生方法によれば、上述した本発明のホログラム再生装置が有 する各種利益と同様の利益を享受することが可能となる。
[0036] 尚、上述した本発明のホログラム再生装置における各種態様に対応して、本発明 に係るホログラム再生方法も各種態様を採ることが可能である。
[0037] (コンピュータプログラム)
本発明の第 1コンピュータプログラムは上記課題を解決するために、上述した本発 明のテンプレートマッチング処理装置 (但し、その各種態様を含む)に備えられたコン ピュータを制御するホログラム再生制御用のコンピュータプログラムであって、該コン ピュータを、前記第 1算出手段及び前記第 2算出手段のうち少なくとも一部として機 能させる。また、本発明の第 2コンピュータプログラムは上記課題を解決するために、 上述した本発明のホログラム再生装置 (但し、その各種態様を含む)に備えられたコ ンピュータを制御するホログラム再生制御用のコンピュータプログラムであって、該コ ンピュータを、前記画像取得手段、前記第 1算出手段、前記第 2算出手段、前記補 正手段及び前記再生手段のうち少なくとも一部として機能させる。
[0038] 本発明の各コンピュータプログラムによれば、当該コンピュータプログラムを格納す る ROM、 CD-ROM, DVD-ROM,ハードディスク等の記録媒体から、当該コン ピュータプログラムをコンピュータに読み込んで実行させれば、或いは、当該コンビュ ータプログラムを、通信手段を介してコンピュータにダウンロードさせた後に実行させ れば、上述した本発明のテンプレートマッチング処理装置又はホログラム再生装置を 比較的簡単に実現できる。
[0039] 尚、上述した本発明のテンプレートマッチング処理装置又はホログラム再生装置に おける各種態様に対応して、本発明の各コンピュータプログラムも各種態様を採るこ とが可能である。
[0040] コンピュータ読取可能な媒体内の第 1コンピュータプログラム製品は上記課題を解 決するために、上述した本発明のテンプレートマッチング処理装置(但し、その各種 態様を含む)に備えられたコンピュータにより実行可能なプログラム命令を明白に具 現化し、該コンピュータを、前記第 1算出手段及び前記第 2算出手段のうち少なくとも 一部として機能させる。コンピュータ読取可能な媒体内の第 2コンピュータプログラム 製品は上記課題を解決するために、上述した本発明のホログラム再生装置 (但し、そ の各種態様を含む)に備えられたコンピュータにより実行可能なプログラム命令を明 白に具現化し、該コンピュータを、前記画像取得手段、前記第 1算出手段、前記第 2 算出手段、前記補正手段及び前記再生手段のうち少なくとも一部として機能させる。
[0041] 本発明の各コンピュータプログラム製品によれば、当該コンピュータプログラム製品 を格納する R〇M、 CD-ROM, DVD-ROM,ハードディスク等の記録媒体から、 当該コンピュータプログラム製品をコンピュータに読み込めば、或いは、例えば伝送 波である当該コンピュータプログラム製品を、通信手段を介してコンピュータにダウン ロードすれば、上述した本発明のテンプレートマッチング処理装置又はホログラム再 生装置を比較的容易に実施可能となる。更に具体的には、当該コンピュータプロダラ ム製品は、上述した本発明のテンプレートマッチング処理装置又はホログラム再生装 置として機能させるコンピュータ読取可能なコード(或いはコンピュータ読取可能な命 令)から構成されてよい。
[0042] 本発明のこのような作用及び他の利得は次に説明する実施例から明らかにされる。
[0043] 以上説明したように、本発明のテンプレートマッチング処理装置又は方法によれば 、第 1算出手段及び第 2算出手段、又は第 1算出工程及び第 2算出工程を備える。ま た、本発明のホログラム再生装置又は方法によれば、画像取得手段、第 1算出手段 、第 2算出手段、補正手段及び再生手段、又は画像取得工程、第 1算出工程、第 2 算出工程、補正工程及び再生工程を備える。従って、テンプレートマッチング処理の 精度を向上させつつ、複雑な演算を必要としない。
図面の簡単な説明
[0044] [図 1]本発明の実施例に係るホログラム記録再生装置の光学系の構成を示す。
[図 2]記録データの 2次元デジタル変調方式の一例を示す。
[図 3]第 1実施例のホログラム記録再生装置の信号処理系の概略構成を示すブロック 図である。
[図 4]記録データを再生する際の信号の波形及びそのタイミングを、ピックアップ内の 撮像センサと対応付けて概念的に記載するタイミングチャートである。
[図 5]マーカを含む空間変調画像パターンの例を示す。
[図 6]本実施例に係るテンプレートマッチング処理の流れを概念的に示すフローチヤ ートである。
[図 7]相関値を算出する際のテンプレート画像と再生画像との関係を概念的に示す 平面図である。
[図 8]算出される相関値の分布の一例を概念的に示すグラフである。
[図 9]二次元的に算出された相関値をマトリクス状に配歹 IJした一の説明図である。 [図 10]二次元的に算出された相関値をマトリクス状に配歹 IJした他の説明図である。
[図 11]マーカの一の形状を概念的に示す平面図であり、該マーカを用いた際の相関 値の分布の態様を概念的に示すグラフである。
[図 12]マーカの他の形状を概念的に示す平面図であり、該マーカを用いた際の相関 値の分布の態様を概念的に示すグラフである。
[図 13]相関値の分布の一例を概念的に示すグラフである。
[図 14]相関値の 3次元的な分布の一の態様を概念的に示す等高線図である
[図 15]相関値の 3次元的な分布の他の態様を概念的に示す等高線図である
[図 16]基準値を算出する際の他の例を概念的に示す説明図である。
符号の説明
[0045] 11 記録再生用レーザ
16 2次元センサ
44 位置検出回路
441 相関値算出部
442 重心算出部
443 画像位置算出部
発明を実施するための最良の形態
[0046] 以下、本発明を実施するための最良の形態について実施例毎に順に図面に基づ いて説明する。尚、以下の実施例では、本発明のテンプレートマッチング処理装置を 備えるホログラム記録再生装置の実施例を用いて説明する。
[0047] (1) 基本構成及び基本動作原理
初めに、図 1から図 4を参照して、本実施例に係るホログラム記録再生装置の基本 構成並びに基本動作原理について説明する。ここに、図 1は、本実施例に係るホログ ラム記録再生装置のピックアップ内に配置される光学系の構成を示し、図 2は、記録 データの 2次元デジタル変調方式の一例を示し、図 3は、本実施例のホログラム記録 再生装置の信号処理系の概略構成を示すブロック図であり、図 4は、記録データを 再生する際の信号の波形及びそのタイミングを、ピックアップ内の撮像センサと対応 付けて概念的に記載するタイミングチャートである。 [0048] 図 1に示すように、ピックアップ 10は、データの記録、再生のためのレーザ光を生成 する記録再生用レーザ 11を備える。
[0049] 記録時においては、記録再生用レーザ 11から出射した光ビーム Loは、レンズ 12 及び 13により構成されるビームエキスパンダによりビーム径が拡大され、空間変調器 14に入力される。空間変調器 14は、例えば液晶素子により構成することができ、格 子状に配置された複数の画素を有する。
[0050] 空間変調器 14は、記録すべき入力データを 2次元デジタル変調して得られる白画 素と黒画素のパターンを表示し、そのパターンにより光ビームを空間変調する。
[0051] 図 2に、空間変調器 14による 2次元デジタル変調の一例が示される。この例では、 図 2 (a)に示すように、デジタルの入力データ、即ち記録媒体 1に記録すべき入力デ ータの「0」と「1」をそれぞれ白画素と黒画素の組み合わせにより表現する。上下方向 に白画素、黒画素を並べた配列が入力データ「0」に対応し、上下方向に黒画素、白 画素を並べた配列が入力データ「1」に対応する。この例は、 1ビットの入力データを 2 ビット(2画素)の 2次元変調データに変換するので、 1: 2差分変調と呼ばれる。
[0052] この変調方式により、入力データ「00101101」を 2次元デジタル変換して得られる 2次元変調データが図 2 (b)に出力変調データとして示されている。即ち、この白画 素と黒画素により構成される変調画像パターンが出力変調データとして空間変調器 14上に表示される。空間変調器 14に入射した光ビーム Loは、空間変調画像パター ンの白画素部分では透過し、黒画素部分では遮断されるため、空間変調器 14から 空間変調画像パターンにより光学的に変調された光ビーム Loが出射される。なお、 上記の例は空間変調の一例であり、本発明の適用は上記の変調方式に限定される ものではない。例えば 2ビットの入力データを 4ビットの 2次元変調データに変換する 、いわゆる 2 : 4変調方式など、入力データを 2次元の変調画像パターンに変換し、空 間変調器を駆動して光束を空間変調することができれば、いかなる 2次元デジタル変 調方式を用いてもよい。
[0053] 再び図 1において、空間変調器 14により空間変調された光ビーム Loはハーフミラ 一 15を通過し、対物レンズ 18により集光されてホログラフィック記録媒体 1に照射さ れる。 [0054] 記録媒体 1の背後(対物レンズ 18と反対側)にはミラー 19が設けられており、対物レ ンズ 18により集光された光ビーム Loは記録媒体 1を透過した後、ミラー 19により反射 されて再度記録媒体内に入射する。従って、対物レンズ 18から直接入射した光ビー ムと、ミラー 19により反射された入射した光ビームとは記録媒体 1内で干渉縞を形成 し、これが記録媒体 1に記録される。
[0055] ミラー 19により反射されて記録媒体 1に入射した光ビーム Loは、ハーフミラー 15に より反射されて 2次元センサ 16により受光される。 2次元センサ 16は例えば CCDァレ ィゃ CMOSセンサなどとすることができ、入射光量に応じた電気信号を出力する。
[0056] 一方、情報再生時においては、空間変調器 14は無変調状態 (即ち、全光透過状 態)に制御される。よって、記録再生用レーザ 11から出射された光ビーム Loは空間 変調器 14により変調されることなぐハーフミラー 15、対物レンズ 18を通り、記録媒体 1に照射される。この光が再生用参照光となる。記録媒体 1内では、再生用参照光と 記録媒体 1に記録された干渉縞により検出光が発生し、これが対物レンズ 18を通過 し、ハーフミラー 15で反射されて 2次元センサ 16に入射する。こうして、 2次元センサ 16上には記録時に空間変調器 14により生成された白黒画素の空間変調画像パタ 一ンが結像され、このパターンを検出することにより記録された入力データに対応す る再生データが得られる。
[0057] 次に、本実施例のホログラム記録再生装置における信号処理系について説明する
[0058] 図 3に示すように、ホログラム記録再生装置は、再生画像メモリ 41と、歪み補正回路 42と、復号回路 43と、位置検出回路 44とを備えている。
[0059] 再生画像メモリ 41は、光ピックアップ 10内に設けられている二次元センサ 16から出 力される出力データ(再生画像)を一時的に格納する。具体的には、スピンドルモー タ 8により回転が制御されているディスク状の記録媒体 1に対して照射される再生用 の光ビーム Loの戻り光ビームから生成される再生画像を格納する。また格納する再 生画像パターンを歪み補正回路 42及び位置検出回路 44の夫々に出力する。
[0060] 歪み補正回路 42は、位置検出回路 44から出力される、再生画像パターンの位置 ずれ量に基づいて再生画像メモリ 41から出力される再生画像に対して歪み補正を 行う。その結果、記録データの 1ページを特定する。
[0061] この際、歪み補正回路 42は歪み補正の一具体例として、例えば幾何補正を行う。
幾何補正とは、データの記録時とデータの再生時における画素位置のずれを補正す ることをいう。記録時には空間変調器 14から記録媒体 1へ、再生時には記録媒体 1 力、ら 2次元センサ 16へ光学系を通して画像パターンが転写されることになる。記録時 と再生時とで、光学系の倍率違いやひずみ、媒体の収縮など生じるため、記録時に おける空間変調器 14上の画素の位置と再生時における 2次元センサ 16上の画素の 位置とを完全に一致させることは不可能に近レ、。このため、記録データの 1ページ毎 に、幾何補正が行われる。より具体的には、位置検出回路 44において算出される、 空間変調器 14上における本来のマーカの位置と再生画像パターンにおいて検出さ れるマーカの位置とのずれに基づいて、再生画像パターンに含まれる各画素位置を 補正する。
[0062] 例えば図 4 (a)に示すように、記録時における空間変調器 14上の画素の位置と再 生時における 2次元センサ 16上の画素の位置(即ち、各受光素子の位置)とが一致 していなければ、 2次元センサ 16のある画素に入射すべき検出光力 2次元センサ 1 6の他の画素に入射してしまう恐れもある。より具体的には、 2次元センサ 16の第 1受 光素子 (第 1画素)及び第 3受光素子 (第 3画素)に本来入射すべき検出光が、二次 元センサ 16の第 0受光素子及び第 2受光素子の夫々に入射してしまう恐れもある。 即ち、画素単位(ピクセル単位)での位置ズレが生ずる恐れがある。その結果、二次 元センサの出力は、本来予想されるべき二値データではなぐその結果、検出光を元 の記録データへと好適に復調することが困難となる。
[0063] 或いは、例えば図 4 (b)に示すように、記録時における空間変調器 14上の画素の 位置と再生時における 2次元センサ 16上の画素の位置とがー致していなければ、二 次元センサ 16の第 1受光素子又は第 3受光素子に本来入射すべき検出光が、二次 元センサ 16の第 1受光素子及び第 2受光素子に跨って、又は第 3受光素子及び第 4 受光素子に跨って入射してしまう恐れもある。即ち、サブピクセル単位での位置ズレ が生ずる恐れがある。その結果、二次元センサの出力は、本来の二値データではな ぐ段階的な多値データとなってしまう。これでは、元の記録データに復調することが できない。このような事態を防ぐベぐ歪み補正回路 42は、再生画像に含まれる各画 素位置を補正する。
[0064] 再び図 3において、復号回路 43は、歪み補正回路 42において歪み補正が行われ た再生画像パターンを復調し、再生データとして出力する。例えば、記録時に空間変 調器 14において適用した 2次元デジタル変調方式に対応する復調方式でデータ復 調を行い、記録データに対応する再生データを出力する。なお、再生データは、その 後、誤り訂正、ディンターリーブ、デスクランブルなどを含む後処理が施され、実際の データとして再生される。
[0065] 位置検出回路 44は、再生画像に含まれるマーカの位置から、再生画像パターンの 座標位置(或いは、再生画像の位置ズレ量や再生画像の歪み等)を検出する。係る 再生画像パターンの座標位置等の検出は、後に詳述するテンプレートマッチング処 理によって行われる。
[0066] より具体的には、位置検出回路 44は、本発明の「第 1算出手段」の一具体例を構成 する相関値算出部 441と、本発明の「第 2算出手段」の一具体例を構成する重心算 出部 442と、本発明の「第 2算出手段」の一具体例を構成する画像位置算出部 443 とを備える。これらの各構成要件の動作の詳細については、後に説明する。
[0067] (2) テンプレート処理
続いて、図 5から図 13を参照して、本実施例に係るホログラム記録再生装置が行う テンプレートマッチング処理にっレ、て説明する。
[0068] ホログラムメモリの記録信号は、空間変調画像パターンの位置の基準となるマーカ を、該空間変調画像パターンに付加した状態でデータを記録する。マーカとは、記録 媒体 1に記録された記録データの 1単位(1ページ)を識別するための情報であり、通 常は所定の形状の画像部分として構成される。
[0069] 具体的には、マーカは空間変調器 14に表示される空間変調画像パターンに付カロ される。図 5に、マーカを含む空間変調画像パターンの例を示す。図 5の例では、空 間変調器 14の表示領域内の略中央に空間変調画像パターン 50が表示されている。 また、空間変調画像パターン 50の外側であって、空間変調器 14の表示領域内の四 隅に T字型のマーカ 52が表示されている。空間変調器 14は、図示しない記録信号 処理系から受け取った入力データを前述のように空間変調して空間変調画像パター ン 50を生成し、図 5に示すように空間変調器 14の表示領域内に表示する。さらに、 空間変調器 14は、予め決められているマーカ 52を表示領域の所定位置に表示する 。こうして、図 5に模式的に示すように、空間変調画像パターン 50とマーカ 52とを含 む表示画像パターン 54が空間変調器 14の表示領域に表示される。
[0070] データの再生時において、 2次元センサ 16が出力する再生画像パターンは、記録 時に空間変調器 14に表示された表示画像パターン 54に対応するデジタル値を有し ている。よって、位置検出部 44がマーカの位置を検出することにより、記録データの 1 ページを抽出する。マーカ位置の検出は、再生画像パターンとマーカを構成する画 像パターン(後述のテンプレート画像)とのマッチングを行うことで行われる。
[0071] 具体的に本実施例におけるテンプレートマッチング処理の流れについて、図 6から 図 13を参照しながら説明する。尚、ここでは、図 6を参照しながらテンプレートマッチ ング処理の全体の流れを説明し、必要に応じて図 7から図 13を参照しながらより詳細 に説明を進める。ここに、図 6は、本実施例に係るテンプレートマッチング処理の流れ を概念的に示すフローチャートである。
[0072] 図 6に示すように、初めに、相関値算出部 441の動作により、再生画像パターンとテ ンプレート画像 (即ち、マーカを構成する画像)との相関関係を示す相関値が算出さ れる(ステップ S 101)。
[0073] 相関値の算出について、図 7から図 10を参照してより詳細に説明する。ここに、図 7 は、相関値を算出する際のテンプレート画像と再生画像パターンとの関係を概念的 に示す平面図であり、図 8は、算出される相関値の分布の一例を概念的に示すダラ フであり、図 9及び図 10の夫々、二次元的に算出された相関値をマトリクス状に配列 した説明図である。
[0074] 図 7に示すように、再生画像パターン 61は記録時に空間変調器 14に表示された表 示画像パターン 54に対応する画像パターンである(但し、図示の便宜上、再生画像 パターンの領域のみを示し、該再生画像パターン自身の内容は図示を省略している )。これに対し、テンプレート画像 62は記録時に使用したマーカ 52に対応する画像 パターンである。再生画像パターン 61とテンプレート画像 62との相関値を算出する 際には、図 7に示すように、再生画像パターン 61上でテンプレート画像 62を画素単 位で X方向及び Y方向に移動し、両者の相関値を算出する。算出される相関値が大 きくなるほど、その位置にマーカ 52が付加されている可能性がより高くなる。
[0075] 例えば、 Y方向の位置を固定して、 X方向にテンプレート画像 62を移動させれば、 図 8に示すように離散的に分布する相関値" C "から" C "が算出される。具体的には
0 4
、テンプレート画像 62の X方向の座標位置が" X "の時には相関値" C "が算出され
0 0
、テンプレート画像 62の X方向の座標位置が" X "の時には相関値" C "が算出され
1 1
、テンプレート画像 62の X方向の座標位置が" X "の時には相関値" C "が算出され
2 2
、テンプレート画像 62の X方向の座標位置が" X "の時には相関値" C "が算出され
3 3
る。尚、この場合、テンプレート画像 62の座標位置は、図 7に示すように、テンプレー ト画像 62の左上の座標(a, b)である。
[0076] 尚、図 8には、 5つの相関値" C "から" C "により予想される相関値の分布の態様を
0 4
一点鎖線で参考までに示している。実際にテンプレート画像 62を移動させることで算 出される相関値の最大値は" C "であるが、図 8の一点鎖線のグラフから推測するに、
2
"C "よりも大きな相関値が存在し得る。本実施例では、後に詳述するように、実際に
2
テンプレート画像 62を移動させることで算出される相関値を用いて、相関値の分布 における最も大きな相関値 (ないしは、その位置)を算出する。
[0077] 更に、 Y方向にテンプレート画像 62を移動させれば、図 9に示すように、二次元的 に分布する相関値" C "から "が算出される。具体的には、テンプレート画像 62
00 22
の座標位置が(X , Y )の時には相関値" C "が算出され、テンプレート画像 62の座
0 0 00
標位置が (X , Y )の時には相関値" C "が算出され、テンプレート画像 62の座標位
0 1 01
置が(X , Y )の時には相関値" C "が算出され、テンプレート画像 62の座標位置が
0 2 02
(X, Y )の時には相関値" C "が算出され、テンプレート画像 62の座標位置が(X
1 0 10 1
, Y )の時には相関値" C "が算出され、テンプレート画像 62の座標位置が(X , Y
1 11 1 2
)の時には相関値" C "が算出され、テンプレート画像 62の座標位置が(X , Y )の
12 2 0 時には相関値" C "が算出され、テンプレート画像 62の座標位置が(X, Y )の時に
20 2 1 は相関値" C "が算出され、テンプレート画像 62の座標位置が(X , Y )の時には相
21 2 2
関値" C "が算出される。 [0078] 或いは、再生画像 61の 1画素を、 2 X 2 = 4つの二次元センサ 16の素子で受光す るオーバーサンプリングを行えば、図 10に示すように、二次元的により細かく分布す る相関値" C "から" C "が算出される。
00 44
[0079] 再び図 6において、続いて、重心算出部 442の動作により、相関値の平坦部が判 別される(ステップ S 102)。具体的には、相関値の分布のうち平坦な区間が判別され る。係る判別について、具体的に図 10を用いて説明する。
[0080] 図 10に示す相関値" C "から" C "のうち" C "が最大であるとする。このとき、 "C
00 44 22
"の両近傍の相関値をマトリクスの列及び行毎に比較する。具体的には、行方向に
22
おける両近傍の相関値" C "ど' C "との大小関係が判定される。この判定の結果、 "
21 23
C " < "C "が成立すれば、 " C "が位置する側のマトリクスの端部の相関値が平坦
21 23 21
部であると判別される。即ち、図 10において網掛け部分として示す" C "、 "C "、 "
00 10
C "C "及び" C "が平坦部であると判別される。他方、 " c " > "c "が成立す
20 30 40 21 23 れば、 "C "が位置する側のマトリクスの端部の相関値が平坦部であると判別される。
23
即ち、 " C "、 "C "、 "C "、 "C "及び" C "が平坦部であると判別される。列方向
04 14 24 34 44
においても同様に、 " C "の両近傍の相関値" C "ど' C "との大小関係が判定され
22 12 32
る。この判定の結果、 " C " > "C "が成立すれば、 " C "が位置する側のマトリクス
12 32 32
の端部の相関値が平坦部であると判別される。即ち、図 10において網掛け部分とし て示す" C "、 "C "、 "C "、 "C "及び" C "が平坦部であると判別される。他方、 "
40 41 42 43 44
C " < "C "が成立すれば、 " C "が位置する側のマトリクスの端部の相関値が平坦
12 32 12
部であると判別される。即ち、 "C "、 "C "、 "C "、 "C "及び" C "が平坦部であ
00 01 02 03 04
ると判別される。
[0081] これは、相関値は、再生画像パターン 61のうちマーカ 52が付加されている部分に おいては突出して高くなる力 それ以外の部分においては概ね同一の値をとるという 性質を利用している。係る性質をより効果的に利用すベぐ再生画像パターン 61のう ちマーカ 52が付加されている部分においては突出して相関値が高くなり、それ以外 の部分においては概ね同一の値をとりやすくなるような形状を有するマーカ 52を用 レ、ることが好ましい。例えば、図 11や図 12に示すマーカ 52がー具体例として示され る。ここに、図 11及び図 12は、マーカ 52の具体的形状を示す平面図であり、該マー 力 52を用いた際の相関値の分布の態様を概念的に示すグラフである。
[0082] 図 11及び図 12の夫々の左側に示すマーカ 52を用いた場合、相関値の分布は夫 々、図 11の右側のグラフ又は図 12の右側のグラフに示される。これらのグラフは共に 、再生画像パターン 61のうちマーカ 52が付加されている部分 (位置ずれ量が 0となる 部分)においては、相関値が突出して高くなるが、それ以外の部分においては、相関 値は概ね同一の値をとる。従って、このようなマーカ 52を用いることで、本実施例に おけるテンプレートマッチング処理を好適に行うことができる。
[0083] 尚、以下の説明においては、平坦部であると判定された領域を周辺領域と称し、そ れ以外の領域を重心領域と称する。
[0084] 再び図 6において、続いて重心算出部 442の動作により、複数の相関値の基準値 Bが算出される(ステップ S103)。基準値 Bとして、周辺領域の相関値の平均値が一 具体例として挙げられる。例えば、図 10の網掛け部分が周辺領域であると判別され ていれば、 B= (C +C + C + C +C +C + C + C +C ) /9となる。
00 10 20 30 40 41 42 43 44
[0085] 続いて、重心算出部 442の動作により、重心領域における複数の相関値の夫々か ら基準値 Bが減算され、減算された相関値を新たな相関値とする (ステップ S 104)。 良口ち、 "C — B" (但し、 m=0, 1, 2, 3, 4 ;n=0, 1 , 2, 3, 4)を、新たな" C ,,とす mn mn る。力 Pえて、周辺領域における複数の相関値を" 0"にする。周辺領域を" 0"にクリアす ることで、以下に示す演算処理数が短縮され高速化でき好ましい。具体的には、周 辺領域の演算が省略される。
[0086] その後、相関値の重心が算出される (ステップ S105)。具体的には、重心の X方向 の座標位置 (この場合、実際にテンプレート画像 62を移動させることで算出される相 関値の最大値の座標位置を基準とする相対的な座標位置) "X "は数 1にて示され、 重心の Y方向の座標位置 (この場合、実際にテンプレート画像 62を移動させることで 算出される相関値の最大値の座標位置を基準とする相対的な座標位置) "Y "は数 2 にて示される。
[0087] [数 1] - 2
[0088] [数 2]
Figure imgf000021_0001
[0089] ここで、この重心の相対的な座標 。, Yc)を小数点座標とする。一方、既に特定し た複数の相関値のうちの最大値の座標を整数座標とする。そこで、小数点座標と整 数座標との和を求め絶対位置座標とする。この絶対位置座標が、相関値が最大とな るサブピクセルの分解能を有する検出位置となることが判明する。即ち、再生画像パ ターン 61中のこの座標位置にマーカ 52が付加されていることが判明し、その結果、 再生画像パターン 61の座標位置や歪みや位置ズレ等を算出することができる (ステ ップ S 106)。
[0090] 係る重心について、より具体的に図 13に示す相関値のグラフを用いて説明する。こ こに、図 13は、相関値の分布の一例を概念的に示すグラフである。尚、図 13におい ては、説明の簡略化のため、本来二次元的に分布する相関値を、敢えて X方向の一 次元に分布するものとして説明を進める。当然 Y方向においても同様の説明が成立 つことが明らかである。
[0091] 図 13 (a)に示すように、実際にテンプレート画像 62を移動させることで算出される 相関値の最大値は" C "であるが、図 13の点線のグラフから推測するに、 "C "よりも
2 2 大きな相関値" C "が存在し得る。つまりこの" C "の座標位置が、再生画像パタ max max
ーン 61に付加されているマーカ 52の座標位置に相当する。し力 ながら、 "C "の max 座標位置は、実際にテンプレート画像 62を移動させることで算出される相関値の最 大値 "C "の座標位置から" z"だけずれる。この" z"が、上述の数 1により示される" X
2 c
"に相当し、前述の小数点座標である。
[0092] この" z"を求めるベぐ相関値は、相関値の重心を頂点として二等辺三角形を構成 するという性質を利用する。 [0093] 具体的には、図 13 (a)に示す相関値のグラフは、重心を中心軸上に移動させると、 図 13(b)に示すようなグラフへと書き換えることができる。この場合、 X方向の座標位 置は、重心の座標位置を基準とする相対的な座標位置として示される。各相関値の 座標位置の間隔が 1画素であることから、例えば、相関値" C "の座標位置は "一 2 +
0
z"となり、相関値" C "の座標位置は "_l + z"となり、相関値" C "の座標位置は "+
1 2
z"となり、相関値" C "の座標位置は" 1 + z"となり、相関値" C "の座標位置は" 2 + z
3 4
"となる。
[0094] ここでは、基準値 Bが" C "となるため、各相関値から" C "が減算された後、相関値
4 4
の重心が算出される。具体的には、相関値の重心の左側(即ち、相対座標位置が負 となる側)のモーメント Mは、 M =-(C -B) X (-2 + z)-(C -B) X (_l+z)と
1 1 0 1
なり、相関値の重心の右側(即ち、相対座標位置が正となる側)のモーメント Mは、
2
M =(C— B) Xz+(C— B) (1 + z)となる。 M =Mが成立するため、—(C— B)
2 2 3 1 2 0
X (-2 + z)-(C -B) X (― 1+z)二(C -B) Xz+(C— B) (1 + z)が成立する。
1 2 3
これを解くと、 Z=(2C +C— C— 2B)/(C +C +C +C 4B)となる。これは、
0 1 3 0 1 2 3
γ方向においても同様である。このような関係を二次元的に分布する相関値に適用 すると、数 1及び数 2となる。
[0095] この場合、重心の座標位置 "z "は、実際に相関値が算出される際の分解能である 画素単位(ピクセル単位)を超えて、サブピクセル単位で算出される。具体的に、図 1 4及び図 15を参照して説明する。ここに、図 14及び図 15は夫々、相関値の 3次元的 な分布の態様を概念的に示す等高線図である。
[0096] 図 14及び図 15の夫々に示すように、相関値は、等高線図の中心部分 (即ち、内側 の等高線)に近づくほど大きな値を有している。本実施例では、その頂点を図 14及 び図 15の夫々の格子点(二次元空間のサンプル点)の値の重心計算により求めてい る。テンプレート画像 62を移動させて実際に算出される相関値を用いるのみでは、図 14及び図 15の夫々の格子点の単位でしか座標位置を算出することができなレ、。し かるに、本実施例では、その格子点の間に位置する重心の座標位置を算出し、その 結果サブピクセル単位での座標位置を算出することができる。これにより、より高精度 に再生画像パターン 61の座標位置を算出することができる。従って、より高精度に再 生画像パターン 61の歪みや位置ズレを補正することができ、その結果、より好適に再 生画像パターン 61を復調し、記録データの再生品質をより向上させることができる。
[0097] カロえて、重心は上述したように比較的簡単な演算で算出することができる。従って、 例えば特許文献 1に示す多変数多項式回帰曲面に関する演算等のような複雑な演 算を行う必要がないという利点をも併せ持つている。つまり、再生画像の座標位置を 高精度に算出しつつも、それに要する処理負荷を低減することができるという二つの 大きな利点を併せ持つている。
[0098] カロえて、複数の相関値の夫々から基準値 Bを減算した後に重心を算出している。こ のため、図 9や図 10に示すマトリクスのうち、重心領域における相関値を考慮して重 心を算出すれば足りる。言い換えれば、周辺領域における相関値を考慮しなくとも、 重心を好適に算出することができる。この結果、テンプレートマッチング処理に要する 処理負荷をより低減し、高速化することができる。
[0099] 尚、上述の説明では、基準値 Bは周辺領域の相関値の平均値とされている力 これ に限定されない。例えば、図 16に網掛け部分として示すように、例えば 25個の相関 値のうち下位 9個の相関値の平均値を基準値 Bとしてもよレ、。或いは、例えば 25個の 相関値の分布から推測される相関値の最小値を基準値 Bとしてもよい。或いは、 25 個の相関値の最小値を基準値 Bとしてもよい。もちろん、他の好適な値を基準値とし てもよい。
[0100] 本発明は、上述した実施例に限られるものではなぐ請求の範囲及び明細書全体 力 読み取れる発明の要旨或いは思想に反しない範囲で適宜変更可能であり、その ような変更を伴なうテンプレートマッチング処理装置及び方法、ホログラム再生装置 及び方法、並びにコンピュータプログラムもまた本発明の技術的範囲に含まれるもの である。
産業上の利用可能性
[0101] 本発明に係るテンプレートマッチング処理装置及び方法、ホログラム再生装置及び 方法、並びにコンピュータプログラムは、例えば、画像処理におけるテンプレートマツ チング処理を行うテンプレートマッチング処理装置に利用可能であり、更にホログラフ イツク記録媒体に対して情報の再生を行うホログラム再生装置に利用可能である。ま た、例えば民生用或いは業務用の各種コンピュータ機器に搭載される又は各種コン ピュータ機器に接続可能なテンプレートマッチング処理装置及びホログラム再生装置 等にも利用可能である。

Claims

請求の範囲
[1] 入力される検出画像と所定のテンプレート画像との相関関係を示す相関値を、前 記検出画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位 毎に複数算出する第 1算出手段と、
前記複数の相関値の重心の座標位置に基づレ、て、前記検出画像の座標位置を算 出する第 2算出手段と
を備えることを特徴とするテンプレートマッチング処理装置。
[2] 前記第 1算出手段は、前記テンプレート画像を前記画素単位で縦方向及び横方向 に向かって二次元的にずらしつつ、前記相関値を算出することを特徴とする請求の 範囲第 1項に記載のテンプレートマッチング処理装置。
[3] 前記第 2算出手段は、前記第 1算出手段により算出される複数の相関値を含む曲 線又は曲面の最小値を前記複数の相関値の夫々から減算した後に、該減算された 複数の相関値の前記重心の座標位置に基づいて前記検出画像の座標位置を算出 することを特徴とする請求の範囲第 1項に記載のテンプレートマッチング処理装置。
[4] 前記第 2算出手段は、前記第 1算出手段により算出される複数の相関値のうちの最 小値を前記複数の相関値の夫々から減算した後に、該減算された複数の相関値の 前記重心の座標位置に基づいて前記検出画像の座標位置を算出することを特徴と する請求の範囲第 1項に記載のテンプレートマッチング処理装置。
[5] 前記第 2算出手段は、前記第 1算出手段により算出される複数の相関値のうち相対 的に小さい n個(但し、 nは 2以上の整数)の相関値の平均値を前記複数の相関値の 夫々力 減算した後に、該減算された複数の相関値の前記重心の座標位置に基づ いて前記検出画像の座標位置を算出することを特徴とする請求の範囲第 1項に記載 のテンプレートマッチング処理装置。
[6] 前記第 2算出手段は、前記複数の相関値のうちの最大値に相当する座標位置及 び前記複数の相関値の重心の座標位置の夫々に基づいて、前記検出画像の座標 位置を算出することを特徴とする請求の範囲第 1項に記載のテンプレートマッチング 処理装置。
[7] 前記第 1算出手段は、マトリクス状に分布する画素単位毎に複数の前記相関値を 算出することを特徴とする請求の範囲第 1項に記載のテンプレートマッチング処理装 置。
[8] 前記複数の相関値のうちの最大値の列方向及び行方向の夫々の両近傍の二つの 相関値の大小関係を判定する判定手段を更に備え、
前記第 2算出手段は、前記マトリクス状に分布する画素単位の列又は行毎の相関 値のうち、前記判定手段により小さいと判定された相関値が位置する側の端部の相 関値の平均値を前記複数の相関値の夫々力 減算した後に、該減算された複数の 相関値の前記重心の座標位置に基づいて前記検出画像の座標位置を算出すること を特徴とする請求の範囲第 7項に記載のテンプレートマッチング処理装置。
[9] 前記第 1算出手段は、前記端部付近の相関値の分布が略平坦になる前記テンプレ ート画像を用いて前記複数の相関値を算出することを特徴とする請求の範囲第 8項 に記載のテンプレートマッチング処理装置。
[10] 入力される検出画像と所定のテンプレート画像との相関関係を示す相関値を、前 記検出画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位 毎に複数算出する第 1算出工程と、
前記複数の相関値の重心の座標位置に基づレ、て、前記検出画像の座標位置を算 出する第 2算出工程と
を備えることを特徴とするテンプレートマッチング処理方法。
[11] 参照光と記録情報に対応する物体光とから形成される干渉縞が記録されたホロダラ フィック記録媒体から前記記録情報を再生するホログラム再生装置であって、 前記参照光の照射により発生する検出光に基づいて、前記記録情報を含む検出 画像を取得する画像取得手段と、
前記検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検出 画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に複 数算出する第 1算出手段と、
前記複数の相関値の重心の座標位置に基づレ、て、前記検出画像の座標位置を算 出する第 2算出手段と、
前記第 2算出手段により算出された前記検出画像の座標位置に基づいて、前記検 出画像の歪み及び位置ズレの少なくとも一方を補正する補正手段と、 前記歪み及び位置ズレの少なくとも一方が補正された検出画像に含まれる前記記 録情報を再生する再生手段と
を備えることを特徴とするホログラム再生装置。
[12] 参照光と記録情報に対応する物体光とから形成される干渉縞が記録されたホロダラ フィック記録媒体から前記記録情報を再生するホログラム再生方法であって、 前記参照光の照射により発生する検出光に基づいて、前記記録情報を含む検出 画像を取得する画像取得工程と、
前記検出画像と所定のテンプレート画像との相関関係を示す相関値を、前記検出 画像に対して前記テンプレート画像を画素単位でずらしつつ、前記画素単位毎に複 数算出する第 1算出工程と、
前記複数の相関値の重心の座標位置に基づレ、て、前記検出画像の座標位置を算 出する第 2算出工程と、
前記第 2算出手段により算出された前記検出画像の座標位置に基づいて、前記検 出画像の歪み及び位置ズレの少なくとも一方を補正する補正工程と、
前記歪み及び位置ズレの少なくとも一方が補正された検出画像に含まれる前記記 録情報を再生する再生工程と
を備えることを特徴とするホログラム再生方法。
[13] 請求の範囲第 1項に記載のテンプレートマッチング処理装置に備えられたコンビュ ータを制御するホログラム再生制御用のコンピュータプログラムであって、該コンビュ ータを、前記第 1算出手段及び前記第 2算出手段のうち少なくとも一部として機能さ せることを特徴とするコンピュータプログラム。
[14] 請求の範囲第 11項に記載のホログラム再生装置に備えられたコンピュータを制御 するホログラム再生制御用のコンピュータプログラムであって、該コンピュータを、前 記画像取得手段、前記第 1算出手段、前記第 2算出手段、前記補正手段及び前記 再生手段のうち少なくとも一部として機能させることを特徴とするコンピュータプロダラ ム。
PCT/JP2006/304056 2005-03-03 2006-03-03 テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム WO2006093254A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US11/885,591 US8041123B2 (en) 2005-03-03 2006-03-03 Template matching processing apparatus and method, hologram reproducing apparatus and method, and computer program
JP2007506015A JP4550110B2 (ja) 2005-03-03 2006-03-03 テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005059464 2005-03-03
JP2005-059464 2005-03-03

Publications (1)

Publication Number Publication Date
WO2006093254A1 true WO2006093254A1 (ja) 2006-09-08

Family

ID=36941284

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/304056 WO2006093254A1 (ja) 2005-03-03 2006-03-03 テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム

Country Status (3)

Country Link
US (1) US8041123B2 (ja)
JP (1) JP4550110B2 (ja)
WO (1) WO2006093254A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008139125A (ja) * 2006-11-30 2008-06-19 Nippon Hoso Kyokai <Nhk> ホログラムデータ領域特定装置及びホログラムデータ領域特定プログラム
WO2009003978A1 (en) * 2007-06-29 2009-01-08 International Business Machines Corporation Directory hologram forming an anchor location of a pattern of stored holograms
US7859971B2 (en) 2007-06-29 2010-12-28 International Business Machines Corporation Directory hologram forming an anchor location of a pattern of stored holograms
WO2015097837A1 (ja) * 2013-12-27 2015-07-02 日立コンシューマエレクトロニクス株式会社 マーカーパタン生成方法、情報記録媒体、情報再生方法、および情報記録媒体再生装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006093255A1 (ja) * 2005-03-03 2006-09-08 Pioneer Corporation マーカ選択方法、マーカ選択装置、マーカ、ホログラム記録装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム
JP4830652B2 (ja) * 2006-06-12 2011-12-07 日産自動車株式会社 画像処理装置及び画像処理方法
JP5972715B2 (ja) * 2012-08-31 2016-08-17 株式会社Screenホールディングス 画像切り出し方法および画像取得装置
EP2806378B1 (en) 2013-05-21 2015-07-08 Thomson Licensing Method, apparatus and storage medium for two-dimensional data storage
CN111784769B (zh) * 2019-04-04 2023-07-04 舜宇光学(浙江)研究院有限公司 基于模板的空间定位方法、空间定位装置,电子设备及计算机可读存储介质
CN112995539B (zh) * 2019-12-16 2022-07-01 青岛海信移动通信技术股份有限公司 一种移动终端及图像处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05120436A (ja) * 1991-10-25 1993-05-18 Yaskawa Electric Corp テンプレートマツチング方法
JPH05312543A (ja) * 1992-05-11 1993-11-22 Matsushita Electric Ind Co Ltd パターンマッチング方法
JPH10124666A (ja) * 1996-10-18 1998-05-15 Daido Denki Kogyo Kk テンプレートマッチング処理方法
JP2001195597A (ja) * 2000-12-11 2001-07-19 Mitsubishi Electric Corp 画像処理装置
JP2004310957A (ja) * 2003-04-10 2004-11-04 Optware:Kk 光情報再生装置、ならびにその実現に利用可能でコンピュータ読み取り可能なプログラムを格納した記録媒体

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62211048A (ja) * 1986-03-12 1987-09-17 株式会社東芝 超音波診断装置
JP2525237B2 (ja) * 1989-02-15 1996-08-14 キヤノン株式会社 相対位置検出装置
JP2705523B2 (ja) * 1993-07-26 1998-01-28 松下電器産業株式会社 トラッキング制御装置
JP3328667B2 (ja) * 1993-12-29 2002-09-30 オムロン株式会社 画像処理による位置計測方法および装置
JP2001174216A (ja) * 1999-12-20 2001-06-29 Ricoh Co Ltd 走査位置測定装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05120436A (ja) * 1991-10-25 1993-05-18 Yaskawa Electric Corp テンプレートマツチング方法
JPH05312543A (ja) * 1992-05-11 1993-11-22 Matsushita Electric Ind Co Ltd パターンマッチング方法
JPH10124666A (ja) * 1996-10-18 1998-05-15 Daido Denki Kogyo Kk テンプレートマッチング処理方法
JP2001195597A (ja) * 2000-12-11 2001-07-19 Mitsubishi Electric Corp 画像処理装置
JP2004310957A (ja) * 2003-04-10 2004-11-04 Optware:Kk 光情報再生装置、ならびにその実現に利用可能でコンピュータ読み取り可能なプログラムを格納した記録媒体

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008139125A (ja) * 2006-11-30 2008-06-19 Nippon Hoso Kyokai <Nhk> ホログラムデータ領域特定装置及びホログラムデータ領域特定プログラム
WO2009003978A1 (en) * 2007-06-29 2009-01-08 International Business Machines Corporation Directory hologram forming an anchor location of a pattern of stored holograms
US7859971B2 (en) 2007-06-29 2010-12-28 International Business Machines Corporation Directory hologram forming an anchor location of a pattern of stored holograms
WO2015097837A1 (ja) * 2013-12-27 2015-07-02 日立コンシューマエレクトロニクス株式会社 マーカーパタン生成方法、情報記録媒体、情報再生方法、および情報記録媒体再生装置

Also Published As

Publication number Publication date
JPWO2006093254A1 (ja) 2008-08-07
US20080166056A1 (en) 2008-07-10
US8041123B2 (en) 2011-10-18
JP4550110B2 (ja) 2010-09-22

Similar Documents

Publication Publication Date Title
WO2006093254A1 (ja) テンプレートマッチング処理装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム
JP4104612B2 (ja) ホログラフィックシステムで再生されたデータイメージを補償する装置及びその方法
JP5625490B2 (ja) プロジェクター、投射状態調整方法及び投射状態調整プログラム
US20100201809A1 (en) Calibration method, calibration device, and calibration system including the device
JP5256899B2 (ja) 画像補正装置、画像補正方法、プロジェクタおよびプロジェクションシステム
JP6320195B2 (ja) 撮像装置、制御装置、制御方法、プログラム、および、記憶媒体
US20050185233A1 (en) Hologram recording and reproduction method, hologram recording and reproduction apparatus, and hologram recording medium
JP2008015946A (ja) 画像処理装置及び画像処理方法
JP4315256B2 (ja) ホログラム記録再生装置及び、ホログラム再生装置及び方法、並びにコンピュータプログラム
JP4664354B2 (ja) マーカ選択方法、マーカ選択装置、マーカ、ホログラム記録装置及び方法、ホログラム再生装置及び方法、並びにコンピュータプログラム
US20050147013A1 (en) Two-dimensional light-receiving element, optical reproducing apparatus and optical recording and reproducing apparatus
JP4812873B2 (ja) ホログラム再生像位置検出方法およびホログラム装置
JP5978866B2 (ja) 撮影装置及び撮影装置の画像処理方法
US20080239425A1 (en) Hologram Recording Apparatus and Method, Hologram Reproducing Apparatus and Method, and Computer Program
JP6015692B2 (ja) プロジェクター、投射状態調整方法及び投射状態調整プログラム
JP4809756B2 (ja) ホログラムデータ領域特定装置及びホログラムデータ領域特定プログラム
KR100579627B1 (ko) 홀로그램 재생 시스템의 포커싱 제어 장치 및 그 방법
CN101193247B (zh) 全像光学储存系统中侦测与补偿损坏像素的方法
KR100578206B1 (ko) 홀로그래픽 디지털 데이터 시스템의 비매칭 보정 장치
JP2008117440A (ja) デジタルイメージ位置調整装置及び方法、データ記録再生装置
US20110075539A1 (en) recording medium recording/reproducing method and a recording medium recording/reproducing apparatus
JP2008305458A (ja) ホログラム再生装置及びホログラム再生方法
KR20070002986A (ko) 홀로그래픽 데이터 저장 시스템에서의 픽셀 비매칭 판별방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
WWE Wipo information: entry into national phase

Ref document number: 2007506015

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

NENP Non-entry into the national phase

Ref country code: RU

WWE Wipo information: entry into national phase

Ref document number: 11885591

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 06715139

Country of ref document: EP

Kind code of ref document: A1