WO2007074912A1 - データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム - Google Patents

データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム Download PDF

Info

Publication number
WO2007074912A1
WO2007074912A1 PCT/JP2006/326303 JP2006326303W WO2007074912A1 WO 2007074912 A1 WO2007074912 A1 WO 2007074912A1 JP 2006326303 W JP2006326303 W JP 2006326303W WO 2007074912 A1 WO2007074912 A1 WO 2007074912A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
base
compression
compressed
dimensional
Prior art date
Application number
PCT/JP2006/326303
Other languages
English (en)
French (fr)
Inventor
Rui Ishiyama
Original Assignee
Nec Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nec Corporation filed Critical Nec Corporation
Priority to JP2007552029A priority Critical patent/JP4868171B2/ja
Priority to CN2006800493110A priority patent/CN101346745B/zh
Priority to EP06843680A priority patent/EP1968017A1/en
Priority to US12/087,102 priority patent/US8248403B2/en
Publication of WO2007074912A1 publication Critical patent/WO2007074912A1/ja
Priority to US13/221,299 priority patent/US8878839B2/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/001Model-based coding, e.g. wire frame
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/27Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving both synthetic and natural picture components, e.g. synthetic natural hybrid coding [SNHC]

Definitions

  • the present invention relates to a method and apparatus for compressing three-dimensional shape data, and in particular, a data compression method and apparatus capable of compressing the shape information of a large number of three-dimensional objects or the color information of the three-dimensional object and its surface to a small data capacity as a whole book, It relates to the data, restoration method and apparatus.
  • Background technology :
  • the shape of a complex 3D object such as a human body that cannot be described by a combination of geometric shapes such as a cube and a cylinder is usually expressed as a set of triangles or polygons (polygons) that are finely divided objects. It is described by the data in which the coordinate values of each vertex in 3D space are arranged.
  • the color information on the object surface is represented by the luminance value as the color of the vertex of each polygon.
  • a two-dimensional coordinate system (u, v) is defined on the surface of the object so that the latitude and longitude are determined on the surface of the earth, and the coordinates are set at appropriate intervals.
  • the 3D shape and surface color information of an object can be considered as an image in which each pixel has six elements (X, y, z, r, g, b). Can do.
  • Non-Patent Document 2 An example of a conventional three-dimensional shape data compression device for reducing the amount of polygonal 3D shape model data is WJ Schroeder, JA Zarge, WE Lorensen, "Decimation of Triangle Meshes", Computer Graphics, 26 , 2, 1992, Pages: 65-70 (Non-Patent Document 2).
  • this conventional data compression device 2 0 0 0 is composed of vertex selection means 2 0 0 1 and vertex reduction means 2 0 0 2.
  • the conventional data compression apparatus 200 having such a configuration operates as follows.
  • the vertex selection means 2 0 0 1 input 3D data 2 0 1 0 medium force, etc., select vertices that do not increase the error even if they are deleted, and the vertex reduction means 2 0 0 2 , By deleting the selected vertices, compressed data 2 0 2 0, which is three-dimensional data in which the number of polygons is reduced and the data amount is reduced, is generated.
  • the vertex selection unit 2 0 0 1 preferentially selects a vertex having a short distance from the polygon at the average position of adjacent polygons, and the vertex reduction unit 2 0 0 In 2, delete vertices. This is repeated until the specified decimation rate is reached.
  • the final compressed data 2 0 2 0 has a reduced number of vertices compared to the original data, and the amount of data is small.
  • Patent Document 1 Japanese Patent No. 3 3 4 1 5 49
  • it is not a technology related to data compression, but an example of a technology that generates 3D shape data; ⁇ Volker Blanz, Thomas Vetter, A Morphable Model For The Synthes is Of 3D Faces ",.
  • Non-patent document 3 In this non-patent document 3, three-dimensional data of a large number of faces are collected in advance, corresponding points are determined between each data, and converted into vertex data. Is applied to calculate and memorize about 100 pieces of base data When a single face photo (2D image) is given, 2 3D data of the same face as the face expressed in the 3D image is synthesized and output.
  • the first problem is that the data compression rate is low. The reason is that a high compression ratio cannot be expected in the first place if polygons are reduced.
  • the second problem is that the resolution of 3D data decreases as the compression rate increases to reduce polygons.
  • the reason is that the resolution of the compressed data, that is, the number of polygons, decreases in proportion to the compression ratio with respect to the number of polygons of the original data, and cannot be restored.
  • the third problem is that the compression ratio cannot be increased even if the number of 3D data to be stored is large. The reason is that individual 3D data is compressed independently using the same method.
  • the fourth problem is that the optimal compression ratio and reproduction accuracy according to the contents of 3D data cannot be achieved.
  • the reason is to compress arbitrary 3D data in the same way.
  • An object of the present invention is to provide a data compression method and apparatus capable of realizing a high compression ratio (compressing data capacity to one hundredth or less) without reducing the resolution (number of polygons) of three-dimensional data.
  • a data compression method and apparatus for efficiently compressing, storing, and transmitting three-dimensional data of many similar objects such as three-dimensional data of many human faces.
  • the first data compression apparatus inputs 3D data, and is a compositing target 3D in which the vertex of the input 3D data is associated with the vertex of the reference 3D data serving as a reference for determining the correspondence of the vertex
  • Corresponding point determination means for creating data and the base 3D data group used to synthesize 3D data are combined to calculate a coupling coefficient for synthesizing the 3D data to be synthesized.
  • Coefficient calculation means for outputting as compressed data of the inputted three-dimensional data.
  • a second data compression device of the present invention in the first data compression device, three-dimensional data is restored from the coupling coefficient calculated by the coefficient calculation means and the base three-dimensional data group, and the restored three-dimensional data If the restoration accuracy is less than the predetermined accuracy, the new base 3D data group is used to synthesize the 3D data. It is characterized by comprising compression determination means added to the above. ,
  • the third data compression apparatus of the present invention is the first or second data compression apparatus, wherein a plurality of base 3D data suitable for the synthesis of the 3D data to be synthesized by the previous self is synthesized into the synthesis of the 3D data.
  • a basis data selection means for selecting from the basis 3D data group to be used is provided.
  • the compressed data includes selection information for specifying base three-dimensional data used for combination in addition to the combination coefficient It is characterized by that.
  • the fifth data compression device in the first data compression device, includes region division means for dividing the synthesis target three-dimensional data into a plurality of partial regions, and the coefficient calculation means is arranged in the same partial region.
  • a coupling coefficient for synthesizing the synthesis target 3D data by combining the divided base 3D data groups is calculated for each partial area, and the calculated coupling coefficient for each partial area is input to the 3D data. It is output as compressed data.
  • region dividing means for dividing the synthesis target three-dimensional data into a plurality of partial regions, and the coefficient calculator 3D data is restored from the coupling coefficient calculated in the stage and the basis 3D data group, the restored 3D data is compared with the 3D data to be synthesized, and the restoration accuracy is determined in advance. If it is less than the above, the synthesis target 3D data is divided into a plurality of partial areas by the area dividing means, and the base 3D data group divided into the same partial areas is combined to form the synthesis target 3D data.
  • a compression determination means for calculating a coupling coefficient for synthesizing each of the partial areas by the coefficient calculation means and outputting the calculated coupling coefficient for each partial area as compressed data of the inputted three-dimensional data. It is characterized by.
  • a seventh data compression device is the fifth data compression device, wherein the compression determination means does not satisfy a predetermined accuracy even if the compression accuracy is divided into partial areas and compressed. Is characterized in that control is performed to divide the synthesis target 3D data into smaller partial areas and obtain a coupling coefficient for each partial area.
  • the eighth data compression device of the present invention is characterized in that, in the fifth, sixth or seventh data compression device, the compressed data includes partial region determination data for specifying the partial region. .
  • a removable storage device that stores the compressed data is provided.
  • the first data decompression apparatus of the present invention inputs compressed data including a coupling coefficient, and combines a plurality of base three-dimensional data used for synthesis by a coupling coefficient included in the compressed data. It is characterized by having 3D data restoration means to restore the data.
  • the second data decompression apparatus of the present invention inputs compressed data including selection information and coupling coefficient of the base 3D data group used for the synthesis, and combines the compression target 3D data based on the selection information.
  • a base data reading means for extracting a used base 3D data group from a predetermined base 3D data group, and combining the extracted base 3D data group with a coupling coefficient included in the compressed data.
  • 3D data restoration means for restoring 3D data.
  • the third data decompression device of the present invention inputs partial region determination data for specifying a partial region of the base three-dimensional data group used for synthesis and compressed data including a coupling coefficient for each partial region, and the partial region Base dare reading means for extracting a partial region of the base 3D data group used for synthesizing the 3D data to be compressed based on the decision data from a predetermined base 3D data group; 3D data restoration means for restoring the 3D data by combining the base 3D data group for each partial area using the coupling coefficient for each partial area included in the compressed data.
  • a removable storage device for storing the compressed data is provided in the first, second or third data restoration device.
  • the compression / decompression system of the present invention includes a compression / decompression apparatus having any one of the first to eighth data compression apparatuses and the first, second, or third data decompression apparatus, and the compression / decompression apparatus. And a storage device for storing the compressed data.
  • the first data transmission device of the present invention includes any one of the first to eighth data compression devices, a storage device that stores reference three-dimensional data and a base three-dimensional data group used by the data compression device, And a data transmission means for transmitting the compressed data generated by the data compression apparatus.
  • the second data transmission device of the present invention is the first data transmission device, wherein the data transmission means transmits the base 3D data added to the base 3D data group by the data compression device to the destination of the compressed data It is characterized by transmitting to.
  • the first data receiving device of the present invention receives the first, second, or third data decompressing device, a storage device that stores a basic three-dimensional data group used by the data restoring device, and compressed data. And a data transmission means for inputting to the data restoration device.
  • the second data receiving apparatus is characterized in that, in the first data receiving apparatus, the data transmission means adds the additional base 3D data to the base 3D data group when receiving the base 3D data. .
  • the data transmission system of the present invention includes a first or second data transmission device and a first or second data transmission device. Is characterized in that it is connected to the second data receiving device through a communication channel.
  • Corresponding point determination means inputs three-dimensional data, and the inputted three-dimensional data is input to the vertex of reference three-dimensional data as a reference for determining the correspondence relationship of the vertex.
  • the coefficient calculation means combines the 3D data sets used to synthesize 3D data to synthesize the 3D data to be synthesized And a step of calculating a coupling coefficient for performing the calculation, and outputting the calculated coupling coefficient as compressed data of the inputted three-dimensional data.
  • c) compression determination means restores three-dimensional data from the coupling coefficient calculated in step b and the base three-dimensional data group, The restored 3D data is compared with the 3D data to be synthesized, and if the restoration accuracy is less than the predetermined accuracy, the new basic 3D data is used for the synthesis of the 3D data.
  • the base data selection means selects a plurality of basic three-dimensional data suitable for synthesis of the synthesis target three-dimensional data, A step of selecting from a group of basic three-dimensional data used to synthesize three-dimensional data.
  • the compressed data includes selection information for specifying base three-dimensional data used for combination in addition to the combination coefficient. It is characterized by that. .
  • a) Corresponding point determination means inputs three-dimensional data, and the inputted three-dimensional data is input to the vertex of the reference three-dimensional data as a reference for determining the correspondence of the vertex.
  • the coupling coefficient for synthesizing the three-dimensional data to be synthesized is calculated for each partial region, and the calculated part Before the coupling coefficient for each region It includes a step of outputting as compressed data of the inputted three-dimensional data.
  • the sixth data compression method of the present invention is as follows: a) Corresponding point determination means inputs 3D data, and the input 3D data is input to the vertex of the reference 3D data as a reference for determining the correspondence relationship of the vertex. A step of creating the synthesis target 3D data in which the vertices are associated with each other; b) the coefficient calculation means combines the base 3D data group used for the synthesis of the 3D data to synthesize the synthesis target 3D data; And c) outputting the calculated coupling coefficient as compressed data of the inputted three-dimensional data, and c) a compression determination means comprising the coupling coefficient calculated in step b and the base three-dimensional data.
  • the coefficient calculation means uses the coefficient calculation means to combine the base 3D data group divided into a plurality of partial areas by the area dividing means and combine the base 3D data groups divided into the same partial areas. Calculating for each partial region, and outputting the calculated coupling coefficient for each partial region as compressed data of the inputted three-dimensional data.
  • the synthesis target three-dimensional It when the entire restoration accuracy does not satisfy a predetermined accuracy even after being divided into partial regions and compressed, the synthesis target three-dimensional It is characterized in that the data is divided into smaller partial areas and the coupling coefficient is obtained for each partial area.
  • the compressed data includes partial area determination data that specifies the partial area. To do.
  • the compressed data is stored in a removable storage device.
  • the three-dimensional data restoration means inputs compressed data including a coupling coefficient, and a plurality of base three-dimensional data used for the synthesis are combined with the coupling coefficient included in the compressed data. It is characterized by combining and restoring 3D data.
  • the basis data reading means inputs the selection data of the basis 3D data group used for the synthesis and the compressed data including the coupling coefficient, and based on the selection information
  • the basic data reading means includes partial region determination data for specifying a partial region of the basic three-dimensional data group used for synthesis and a coupling coefficient for each partial region.
  • the basic data reading means includes partial region determination data for specifying a partial region of the basic three-dimensional data group used for synthesis and a coupling coefficient for each partial region.
  • the three-dimensional data restoring means restores the three-dimensional data by combining the extracted base three-dimensional data group for each same partial area by using a coupling coefficient for each partial area included in the compressed data. It is characterized by including.
  • the compressed data is input from a removable storage device.
  • the compression / decompression method of the present invention stores compressed data generated by any one of the first to eighth data compression methods in a storage device, and the compressed data read from the storage device is stored in the first, second or third It is characterized in that it is restored to three-dimensional data by the data restoration method.
  • the first data transmission method of the present invention is characterized in that the compressed data generated by any one of the first to eighth data compression methods is transmitted through the data transmission means.
  • the second data transmission method of the present invention is the first data transmission method, wherein the data transmission means converts the base 3D data added to the base 3D data group in the data compression method into compressed data. It is transmitted to a transmission destination.
  • the compressed data received by the data transmitting means is transmitted to the data transmitting means.
  • a second data reception method of the present invention is the first data reception method, wherein the data transmission means adds a basic three-dimensional data group used in the data restoration method when additional basic three-dimensional data is received. It is characterized by adding.
  • the data transmission method of the present invention is characterized in that the first or second data transmission method and the first or second data reception method are combined.
  • the present invention efficiently compresses input 3D data with other 3D data. That is, based on the reference 3D data, the corresponding vertices are determined between the input 3D data and the base 3D data group, and from all of the base 3D data group or the base 3D data group Calculate the coupling coefficient for synthesizing the same 3D data as the input 3D data by linearly combining the selected partial 3D data groups, and use this coupling coefficient as the compressed data of the input 3D data .
  • the original 3D data is restored by combining the base 3D data used for the synthesis according to the coupling coefficient indicated by the compressed data.
  • the present invention utilizes the fact that the data amount of the coupling coefficient for combining the basic three-dimensional data group is much smaller than the data amount of the original three-dimensional data.
  • 3D data is used as input, and a coupling coefficient is calculated to synthesize this input 3D data by a combination of basic 3D data groups.
  • the coupling coefficient for the input 3D data By substituting the coupling coefficient for the input 3D data, the amount of data required for storing and transmitting 3D data is compressed.
  • the basis 3D data group used for calculating the coupling coefficient may be basis data calculated by principal component analysis from a plurality of 3D data collected in advance, or 3D data itself.
  • the first effect is that 3D data can be compressed at a very high compression rate.
  • 3D shape data which is tens of thousands to hundreds of thousands of apex data, can be compressed into data composed of several hundreds of coupling coefficients, reducing the data capacity to one-hundredth or less. This is because it can be compressed.
  • the second effect is that the resolution of compressed 3D data does not decrease.
  • the reason is that the restored 3D data is the same as the base 3D data used for the synthesis. This is because the resolution does not decrease if the resolution is higher than or equal to the original 3D data.
  • the third effect is that the storage capacity required for storing and transmitting newly added data can be greatly reduced, particularly in a data base system that stores a large amount of three-dimensional data.
  • the reason for this is that when new data is additionally stored, the existing data is used as the base 3D data, the new data is converted into a coupling coefficient, and this coupling coefficient is stored.
  • the fourth effect is that the amount of calculation required for data compression and accuracy degradation of the data after decoding can be suppressed by adopting a configuration that selects and uses optimal base data according to the input 3D data. .
  • FIG. 1 is a block diagram of a first embodiment of a data compression apparatus according to the present invention.
  • FIG. 2 is a flowchart showing a processing example of the first embodiment of the data compression apparatus according to the present invention.
  • FIG. 3 is a block diagram of the first embodiment of the data restoration apparatus of the present invention.
  • FIG. 4 is a flowchart showing an example of processing according to the first embodiment of the data restoration apparatus of the present invention.
  • FIG. 5 is a block diagram of a second embodiment of the data compression apparatus according to the present invention.
  • FIG. 6 is a flowchart showing a processing example of the second embodiment of the data compression apparatus of the present invention.
  • FIG. 7 is a block diagram of a third embodiment of the data compression apparatus of the present invention.
  • FIG. 8 is a flowchart showing a processing example of the third embodiment of the data compression apparatus of the present invention.
  • FIG. 9 is a block diagram of the second embodiment of the data restoration apparatus of the present invention.
  • FIG. 10 is a flowchart showing a processing example of the second embodiment of the data restoration apparatus of the present invention. It is a chart.
  • FIG. 11 is a block diagram of a fourth embodiment of the data compression apparatus of the present invention.
  • FIG. 12 is a flow chart showing a processing example of the fourth embodiment of the data compression apparatus of the present invention.
  • FIG. 13 is a block diagram of a fifth embodiment of the data compression apparatus of the present invention.
  • FIG. 14 is a flowchart showing a processing example of the fifth embodiment of the data compression apparatus of the present invention.
  • FIG. 15 is a diagram showing an example of a method for dividing the three-dimensional face data.
  • FIG. 16 is a diagram showing another example of the method for dividing the three-dimensional face data.
  • FIG. 17 is a diagram showing another example of the method for dividing the three-dimensional face data.
  • FIG. 18 is a block diagram of a third embodiment of the data restoration apparatus of the present invention.
  • FIG. 19 is a flowchart showing a processing example of the third embodiment of the data restoration apparatus of the present invention.
  • FIG. 20 is a block diagram of an embodiment of the compression / decompression system of the present invention.
  • FIG. 21 is a block diagram of an embodiment of a data transmission system of the present invention.
  • Figure 22 is a block diagram of a conventional data compression device. Explanation of symbols
  • the first embodiment of the data compression apparatus of the present invention is a compression apparatus 1 that inputs three-dimensional data 1 2 0 representing the shape of an object and outputs the compressed data 1 3 0. It consists of 0 0 and a storage device 1 1 0 connected to it.
  • reference 3D data 1 1 1 and base 3D data group 1 1 2 are stored in advance.
  • a combination coefficient for synthesizing 3D data 1 2 0 by linearly combining a plurality of 3D data is compressed data of 3D data 1 2
  • a plurality of 3 Vertices must be associated with the 3D data and the input 3D data 1 2 0.
  • the reference 3D data 1 1 1 stored in the storage device 1 1 0 is 3D data that serves as a reference for determining the correspondence between the vertices.
  • the basis 3D data group 1 1 2 corresponds to a plurality of 3D data used for synthesis.
  • Each base 3D data is created by associating 3D data generated by associating the vertex of 3D data of a certain object with the vertex of reference 3D data 1 1 1 or so This is the base data obtained by calculation such as principal component analysis from the three-dimensional data of many objects.
  • the compression device 1 0 0 is a corresponding point determining means 1 0 1 for creating the synthesis target 3D data 1 0 3 in which the vertex of the input 3D data 1 2 0 is associated with the vertex of the reference 3D data 1 1 1 1
  • the base 3D data group 1 1 2 Combines multiple base 3D data included in the base 3D data, calculates the coupling coefficient to synthesize the 3D data 1 0 3 to be synthesized, and inputs the calculated coupling coefficient 3 And coefficient calculation means 1 0 2 for outputting the compressed data 1 3 0 of the dimension data 1 2 0.
  • FIG. 2 shows the flow of processing of the data compression apparatus of this embodiment.
  • the processing operation of the data compression apparatus shown in FIG. 1 will be described with reference to FIG.
  • the corresponding point determining means 1 0 1 of the compression device 1 0 0 inputs the 3D data 1 2 0 and reads the reference 3D data 1 1 1 from the storage device 1 1 0 force (Step S 1 0 1, S 1 0 2), reference 3D data 1 1 1 3 1 Data 103 is created (step S103).
  • the coefficient calculation means 102 reads the base 3D data group 1 1 2 from the storage device 1 10 (step S 104), and combines the base 3D data group to synthesize the synthesis target 3D data 103.
  • the coupling coefficient is calculated (step S 105), and the calculated coupling coefficient is output as compressed data 1 30 of the three-dimensional data 120 (step S 106). .
  • the three-dimensional data 120 to be subjected to data compression is input (step S 1101).
  • the target 3D data 120 can be various.
  • an example of compressing 3D data of a human face will be described.
  • There are various methods for inputting 3D data For example, there is a method of measuring with a 3D measuring device.
  • a measuring device using the measuring technique described in Non-Patent Document 3 can be used.
  • the 3D data obtained by this technology is polygon data with 3D coordinates and texture (surface color) image brightness values for many measurement points (top points).
  • the input 3D data 120 has 1 million vertices, each X yz value of the 3D coordinates is 16 bit floating point, and each rgb value of texture luminance value is an 8 bit integer. Assume that each is represented. In this case, the amount of input 3D data 120 will be 100000 X (3 X 2 + 3 X 1) bytes, or about 900 kilobytes.
  • Reference 3D data 1 1 1 can be 3D data of a face of a specific person, or 3D of faces of multiple persons, such as multiple persons targeted in the base, 3D data group 1 1 2 It may be an average value of data.
  • the reference 3D data 1 1 1 has 90,000 vertices, and like the input 3D data 120, the unit is [mm] and the 3D coordinates are 3 1 6-bit floating point
  • the texture luminance value is represented by three 8-bit integer luminance values of RGB (0 power to 255).
  • Reference 3D data 1 1 If the 3D coordinate of the i-th vertex of 1 1 1 is (xri, yri, zri) and the texture brightness value is (rri, gri, bri), the reference 3D data 1 1 1 is 3 Dimensional shape and texture image are coordinate values of each vertex It is expressed as follows as one vector data in which brightness values are arranged.
  • step Sr [xrl, yrl, zrl, xr2, yr2, zr2, ⁇ ⁇ , xr90000, yr90000, zr90000] ⁇ (1)
  • Tr [rrl, grl ,. brl, rr2, gr2, br2, ... ⁇ , Rr90000, gr90000, br90000] (2)
  • the vertex of the input 3D data 120 corresponding to each vertex of the reference 3D data 1 1 1 is determined (step S 103).
  • Various methods can be applied to this, but as an example, a method of searching for a vertex having the closest 3D coordinate and texture luminance value can be used.
  • the 3D coordinate of the j-th vertex is (xtj, ytj, ztj)
  • the texture brightness is (rtj, gtj, btj)
  • the following cost function C is defined.
  • the target 3D data 103 which is the input 3D data for which the points are determined, is the 3D shape data and the texture image data. Represented as: That is, the reference 3D data.1 1 If the vertex of the input 3D data 1 20 corresponding to vertex i of j 1 is j (i), the shape and texture of the 3D data to be synthesized are the following vectors, respectively. Expressed by St and Tt.
  • the basis 3D data which is a 3D data group of a sufficient number of objects, is determined.
  • the data group 1 1 2 is read from the storage device 1.10 (step S 1 0 4).
  • the basis 3D data group 1 1 2 can be of any of the following types: a) 3D data type: A type in which all 3D data of the base 3D data group 1 1 2 uses the 3D data of the human face.
  • the base 3D data group 1 1 2 has already undergone the same processing as the corresponding point determination processing in step S 1 0 4.
  • the basic 3D data group 1 1 2 uses the 3D data type.
  • the base 3D data group 1 1 2 is a vector whose 3D shape and texture are represented by a vector, and the vertex 'corresponding to the vertex j of the reference 3D data 1 1 1 is j (i).
  • the three-dimensional shape S bk and texture Tbk of the three-dimensional data are expressed as follows.
  • Tbk [rbkj (1), gbkj (1), bbkj (1), rbkj (2), gbkj (2), bbkj (2), ..., rbkj (90000), gbkj (90000), bbkj (90000 ),]
  • the calculated coefficient data ⁇ ask ⁇ , ⁇ atk ⁇ is output as compressed data 1 3 0 of the input three-dimensional data 1 2 0 (step S 1 0 6).
  • the first embodiment of the data restoration device is a restoration device 2 0 which inputs compressed data 2 2 0 representing the shape of an object and outputs the original 3D data. 0 and a storage device 2 1 0 connected thereto.
  • the storage device 2 1 0 stores in advance a base 3D data group 2 1 1 that is exactly the same as the base 3D data group 1 1 2 of FIG. 1 on the data compression side.
  • the decompressor 2 0 0 inputs the compressed data 2 2 0 corresponding to the compressed data 1 3 0 in FIG. 1 on the data compression side, and the base 3D data group 2 1 1 is indicated by the compressed data 2 2 0 3D data restoring means 2 0 1 is provided for generating and outputting 3D data coupled by the coupling coefficient.
  • FIG. 4 shows the processing flow of the data restoration apparatus of this embodiment.
  • Restoration device 2 0 0 The three-dimensional data restoration means 20.1 inputs the compressed data 220 and reads the basic three-dimensional data group 2 1 1 from the storage device 2 1 ⁇ (steps S 201 and S 202) and compresses the basic three-dimensional data group 2 1 1 Combined according to the coupling coefficient indicated by data 220, restores and outputs 3D data (Steps S203, S204) 0
  • coefficient data for restoring the three-dimensional data 120 is generated as the compressed data of the three-dimensional data 120 using the base three-dimensional data group 1 12.
  • the coefficient data is much smaller than the 3D data, so a high compression ratio can be achieved.
  • the input 3D data is 900 kilobytes, while the coefficient data is only 400 bytes.
  • the restored 3D data 230 is calculated by a combination of the base 3D data group 2 1 1 and the number of vertices is the same as the base 3D data group 2 1 1. Therefore, even though an extremely high compression ratio is achieved, there is little degradation in resolution due to a decrease in the number of vertices due to data compression and decompression.
  • the input 3D data before compression is
  • 3D data to be compressed is 90,000 vertices. —The number is 90,000. If the conventional technology reduces the number of vertices from 100,000 to 90,000, the amount of data is reduced by only 10%, but the present invention can achieve a much higher compression ratio.
  • the compression device 3 00 includes compression determination means 3 3 in addition to the corresponding point determination means 3 0 1 and coefficient calculation means 3 0 2. 1 is different from the data compression apparatus according to the first embodiment of FIG.
  • the compression determination means 3 0 3 restores the 3D data from the coupling coefficient and the base 3D data group 3 1 2 calculated by the coefficient calculation means 3 0 2, and the restored 3D data and the 3D data to be synthesized 3 If the restoration accuracy is less than the predetermined accuracy, the coefficient calculation means 3 0 2 is added after adding the synthesis target 3D data 3 0 4 to the base 3D data group 3 1 2. If the restoration accuracy satisfies a predetermined accuracy, the coupling coefficient calculated by the coefficient calculation means 30 2 and the basis 3D data group 3 1 2 'used for synthesis are identified. Base selection data to be output as compressed data 3 30.
  • FIG. 6 shows the processing flow of the data compression apparatus of this embodiment.
  • the corresponding point determination means 3 0 1 of the compression device 3 0 0 inputs the 3D data 3 2 0 and reads the reference 3D data 3 1 1 from the storage device 3 1 0, and the reference 3D data 3 1 1 Vertex of 3D data 304 to be synthesized is created by associating the vertices of the input 3D data 320 with (steps S301 to S303).
  • the coefficient calculation means 302 reads the base 3D data group 3 1 2 from the storage device 3 1 0 and combines the base 3D data group 3 1 2 to combine the 3D data 304 to be combined. Calculate the coefficients (Steps S304, S305). Up to this point, the operation is the same as that of the data compression apparatus of the embodiment of FIG.
  • the compression determination unit 303 determines whether the value of the error E is smaller than a predetermined threshold value. If the error is too large (NO in step S307), the target 3D data (St and Tt) 304 is added to the base 3D data group 31 2 (step S308), and the base 3D after the addition is added. Based on the data group 31 2, the coefficient calculation means 3 02 is caused to recalculate the coupling coefficient (step S 304). On the other hand, if the error E is not greater than a predetermined threshold (YES: in step S307), the coupling coefficient calculated by the coefficient calculation means 302 and the basis 3D data group used for synthesis 3 1 2 Are output as compressed data 330 (step S 309).
  • New 3D data to base 3D data group 3 1 2 in step S308 Specifically, is added by the following method.
  • Base 3D data group 3 1 If all the base 3D data that composes the 3D data type is a 3D data type that uses the 3D data of the human face itself, the new 3D data is used as the base 3D data group 3 1 Append as the last data of 2. For example, if there are 1 0 0 3D data numbered from 1 to 1 0 0 in the base 3D data group 3 1 2, the new 3D data is 1 0 1st data Add as If the original 100 dimensional 3D data can be restored with sufficient accuracy, select the 3D basal 3D data from 1 to 100 as the compressed data 3 3 0. If one additional 3D data can be restored with sufficient accuracy, the compressed data 3 3 0 will contain the base 3D data from No. 1 to 1 0 1 Include data to select.
  • all the basic three-dimensional data constituting the basic three-dimensional data group 3 1 2 are the basic data obtained by calculation from the three-dimensional data of many human faces. After that, when changing to mixed type or already mixed type, new 3D data itself is added as new basic 3D data as in Method 1. In this case, the base 3D data is 1 Therefore, data indicating which basis three-dimensional data group is used in the compressed data 3 30 is included as the basis selection data.
  • Method 1 and Method 3 have the advantage of not requiring calculation time for principal component analysis, and only store one 3D data added to the base, and the data transmission system described later only needs to transmit it to the restoration side.
  • the synthesis target 3D data 3 0 4 derived from the input 3D data 3 2 0 is added as new base 3D data, but is already stored in the storage device 3 1 0.
  • One or more 3D data may be added, and in that case, since it is already stored, no new storage is required, and the same 3D data is already present on the restoration side in the data transmission system described later. If is stored, there is no need to transmit it.
  • method 1 and method 3 have the disadvantage that the restoration calculation by equations (1 0) and (1 1) is slower than method 2.
  • Method 2 has the advantage of being able to calculate equations (8) and (9) at high speed, but of course it takes time to calculate principal component analysis. Moreover, if all the bases are recalculated, all bases (S bl ⁇ S blOO) change. When decoding using the equations (1.0) and (11), the same basic 3D data as when the coefficient data was calculated is required, so all these 100 are added and stored. It must be transmitted to the restoration side in the data transmission system described later. For this reason, there is a drawback that the capacity for storing the base data becomes enormous.
  • the data compression device of this embodiment can be used as needed while operating the system. Therefore, even if the base 3D data prepared in advance is insufficient, data compression can be performed without reducing the accuracy.
  • the compression device 4 0 0 1 is different from the data compression apparatus according to the first embodiment in FIG. 1 in that it includes base data selection means 4 03 in addition to corresponding point determination means 4 0 1 and coefficient calculation means 4 0 2.
  • the basis data selection means 4 0 3 selects from the basis 3D data group 4 1 2 a plurality of basis 3D data suitable for composition of the 3D data 4 0 4 to be synthesized generated by the corresponding point decision means 4 0 1 And transmitted to the coefficient calculation means 4 0 2.
  • Coefficient calculation means 4 ⁇ 2 calculates the coupling coefficient to synthesize the target 3D data 4 0 4 by combining multiple base 3D data selected by the base data selection means 4 0 3
  • the selected coupling coefficient and the basis selection data for specifying the plurality of basis three-dimensional data used for the synthesis are output as compressed data 43 0.
  • Input 3D data 4 2 0, reference 3rd order 3 ⁇ 4 data 4 1 1 and base 3D data group 4 1 2 data are input 3D data 1 2 0, reference 3D data 1 1 1 and base 3 Same as 3D data group 1 1 2, corresponding point determining means 4 0 1 and coefficient calculating means 4 0 2 function as corresponding point determining means 1 0 1 and coefficient calculating means 1 0 2 in FIG. Are almost the same.
  • FIG. 8 shows the flow of processing of the data compression apparatus of this embodiment.
  • the corresponding point determination means 4 0 1 of the compression device 400 shown in FIG. 7 inputs the 3D data 4 2 0 and reads the reference 3D data 4 1 1 from the storage device 4 1 ⁇
  • the 3D data 4 0 4 to be synthesized is created by associating the vertex of the 3D data 4 2 0 with the vertex of the 3D data 4 1 1 (steps S 4 0 1 to S 4 0 3). Up to this point, the operation is the same as that of the data compression apparatus of the embodiment shown in FIG.
  • the basis data selection means 4 0 3 reads the basis 3D data group 4 1 2 from the storage device 4 1 0, and from among them, a plurality of basis 3Ds suitable for the synthesis of the synthesis target 3D data 4 0 4 Select the data (step S 4 0 4).
  • the correlation value (similarity) R k between each base 3D data (Sb Tbk) included in the base 3D data group 4 1 2 and the synthesis target 3D data (St, Tt) Using the appropriate weight wR, calculate using the following formula.
  • Rk (Sbk-St) / (
  • the basis data selection means 43 selects the basis 3D data having a large correlation value Rk.
  • the selection method a method of selecting a predetermined number of basic 3D data in descending order of the correlation value Rk, or selecting all basic 3D data having a correlation value Rk larger than a predetermined threshold value.
  • the top 50 base 3D data are selected from the base 3D data group 4 1 2 in descending order of the correlation value Rk.
  • the selected 50 basis 3D data is used as the 1st, 2,..., 50th base 3D data in ascending order of the number assigned to it. Serve with Sb Tbk ⁇ .
  • the base selection data representing which data is selected from the base 3D data group 4, 1 2 is generated.
  • the base selection data representing which data is selected from the base 3D data group 4, 1 2 is generated.
  • which base 3D data is selected can be represented by 1 0 0 bits data.
  • the correlation value (similarity) used here and the selection method of the base 3D data are only examples, and various other methods can be used.
  • As an example of another method there is a method in which correlation values are calculated independently for shapes and textures, and 50 pieces of data having high correlation values are selected as basic three-dimensional data for each.
  • different basis 3D data may be selected depending on the shape and texture. Therefore, the basis selection data indicating which basis 3D data is selected from the basis 3D data group 4 1 2 is the shape.
  • texture two sets, totaling 200 bits of data.
  • the coefficient calculation means 4 0 2 uses the coupling coefficient ⁇ asl, ' ⁇ for synthesizing the synthesis target 3D data 4 0 4 using the basis 3D data group selected by the basis data selection means 4 0 3.
  • ⁇ , Cts50,. Atl,..., at50 ⁇ are calculated by equations (8) and (9) (step S 4 0 5).
  • the coefficient calculation means 4 0 2 outputs the calculated coefficient data and the base selection data that is a list for specifying the base 3D data group used for the synthesis as compressed data 4 3 0 (step S 4 0 6).
  • the effect of the data compression apparatus of this embodiment will be described.
  • the data compression apparatus is configured to select the optimum base 3D data for the input 3D data 4 2 0 and perform data compression.
  • the number of data can be reduced.
  • the number of base 3D data has been reduced to 50 by the base data selection means 4 0 3, so that the coefficient is larger than when using 100 base 3D data.
  • the amount of data is reduced to 1 to 2.
  • the amount of calculation for the coefficient calculation is reduced by that amount, enabling high-speed processing.
  • the number of coupling coefficients calculated by Eqs. (8) and (9) is reduced to 12, and the calculation time is reduced to about half. Furthermore, even when the same number of basic 3D data is used, the accuracy of the restored 3D data can be increased.
  • the original 3D data is restored from the compressed data generated by the data compression apparatus of the second embodiment shown in FIG. 5 and the data compression apparatus of the third embodiment shown in FIG. An example of the configuration of the data restoration apparatus will be described.
  • the second embodiment of the data decompression apparatus is a decompression apparatus which inputs compressed data of 3D data representing the shape of an object, 5 2 0 and outputs the original 3D data 5 3 0 It is composed of 5 0 0 and a storage device 5 1 0 connected to it.
  • the storage device 5 1 0 stores in advance the base 3D data group 3 1 2 in FIG. 5 on the data compression side or the base 3D data group 5 1 1 that is exactly the same as the base 3D data group 4 1 2 in FIG. Has been.
  • the decompressor 5 0 0 inputs compressed data 5 2 0 corresponding to the compressed data 3 3 0 in FIG. 5 or the compressed data 4 3 0 in FIG. 7 on the data compression side, and is included in this compressed data 5 2 0.
  • the base data reading means 5 0 1 for reading the base 3D data group used for the synthesis on the compression side from the storage device 5 10 based on the base selection data to be compressed, and compressing the read base 3D data group
  • three-dimensional data restoring means 5 0 2 for outputting three-dimensional data 5 3 0 combined by a coupling coefficient included in data 5 2 0.
  • FIG. 10 shows the flow of processing of the data restoration apparatus of this embodiment.
  • the base data reading means 5 0 1 of the decompression device 5 0 0 shown in FIG. 9 receives the compressed data 5 2 0 (step S 5 0 1)
  • the base selection data included in the compressed data 5 2 0 Based on this, the base 3D data group used for synthesis on the compression side is read out from the base 3D data group 5 1 1 of the storage device 5 10 (step S 5 0 2).
  • the three-dimensional data restoring unit 50 2 converts the base three-dimensional data group read by the base data reading unit 5 0 1 into the compressed data 5 by the above formulas (1 0) and (1 1).
  • the combination included in 20 is combined according to the number to restore the three-dimensional data and output (steps S 5 0 3 and S 5 0 4).
  • the compression device 6 0 0 has a region dividing means 6 0 2 in addition to the corresponding point determination means 6 0 1 and the coefficient calculation means 6 0 3.
  • the first embodiment of FIG. 1 is that the storage device 6 1 0 includes the reference 3D data 6 1 1 and the base 3D data group 6 1 3 in addition to the partial region determination data 6 1 2. This is different from the data compression apparatus according to the above.
  • Partial region determination data 6 1 2 is input 3D.
  • 3D data 6 0 4 to be synthesized by corresponding point determination means 6 0 1 from data 6 2 0 and basis 3D data group 6 1 3 used for synthesis Is defined in what partial area.
  • the area dividing means 6 0 2 refers to the partial area determination data 6 1 2 Divide the original 3D data in the original data 6 0 4 and the basis 3D data group 6 1 3 into the same partial area, and then calculate each partial area of the synthesis target 3D data 6 0 4 by means of coefficient calculation 6 0 3 And each divided area of the base 3D data group 6 1 3 is stored in the storage device 6 10. If the base three-dimensional data group 6 13 is already divided into partial areas based on the partial area determination data 6 12, the dividing process may be omitted.
  • the coefficient calculation means 6 0 3 calculates the coupling coefficient for each partial region by combining the base 3D data group 6 1 3 divided into the same partial region and combining the target 3D data 6 0 4.
  • the calculated coupling coefficient for each partial area is output as compressed data 6 3 0 of 3D data 6 2 0.
  • the partial area determination data 6 1 2 may be included in the compressed data 6 30.
  • FIG. 12 shows the flow of processing of the data compression apparatus of this embodiment.
  • the corresponding point determination means 6 0 1 of the compression device 600 shown in FIG. 11 inputs the 3D data 6 2 0 and reads the reference 3D data 6 1 1 from the storage device 6 1 0.
  • 3D data 6 0 4 to be synthesized is created by associating the vertex of the three-dimensional data 6 2 0 with the vertex of the reference 3D data 6 1 1 (steps S 6 0 1 to S 6 0 3).
  • the operation is the same as that of the data compression apparatus of the embodiment of FIG.
  • M is the total number of partial areas) of the 3D data 6 0 4 to be synthesized
  • the p-th partial area is expressed by the above equations (4) and (5 )
  • Is defined by vectors Stp and Ttp, which are obtained by taking out the data of vertices belonging to the p-th partial region and arranging them
  • the p-th partial region of the k-th basis 3D data is expressed by the above equation (6).
  • it is defined by the vectors Sbkp and Tbkp that are obtained by taking out the data of the vertices belonging to the p-th partial region from Equation (7) and arranging them.
  • the coefficient calculation means 6 0 3 uses, for each partial area, a coupling coefficient for synthesizing the partial area of the synthesis target 3D data 6 0 4 using the partial area of the base 3D data group 6 1 3.
  • ⁇ a skp ⁇ and ⁇ a tkp ⁇ are calculated by the same formulas as the formulas (8) and (9). Step S 6 0 6).
  • the coefficient calculation means 60 3 outputs the coupling coefficient for each partial area and the partial area determination data 6 12 as compressed data 6 30 (step S 6 0 7).
  • the synthesis target 3D data 6 0 4 derived from the input 3D data 6 20 and the base 3D data group 6 1 3 are divided into the same plurality of partial regions, and Since the base 3D data group is combined for each region to obtain the coupling coefficient for combining the target 3D data, compressed data with higher restoration accuracy can be obtained than when the region is not divided. The reason is that the optimum coupling coefficient is calculated for each partial region by the equations (8) and (9).
  • the compression device 7 0 0 is added to the corresponding point determination means 7 0 1, the area division means 7 0 2, and the coefficient calculation means 7 0 3. It is different from the data compression apparatus according to the fourth embodiment shown in FIG. 11 in that compression determination means 70 4 is provided.
  • the compression determination means 70 4 restores the 3D data from the coupling coefficients and the partial areas of the basis 3D data group 7 1 3 calculated for each partial area by the coefficient calculation means 70 3, Compare the 3D data with the 3D data 7 0 5 to be synthesized, and if the restoration accuracy is less than the predetermined accuracy, divide the 3D data 7 0 5 to be synthesized into smaller subregions. Control for obtaining the coupling coefficient for each partial region is performed.
  • Input 3D data 7 2 0.
  • Reference 3D data 7 1 1 and Basis 3D data group 7 1 3 data are shown in Figure 1 1
  • Input 3D data 6 2 0,
  • area dividing means 7 0 2 and coefficient calculating means 7 0 3 are corresponding point determining means 6 0 1, area dividing in FIG. It is functionally the same as the means 6 0 2 and the coefficient calculation means 6 0 3.
  • the partial region determination data 7 1 2 is the 3D data 7 0 5 to be synthesized by the corresponding point determination means 7 0 1 from the input 3D data 7 2 0 and the base 3D used for the synthesis It contains multiple division definitions that describe what subregion the data group 71 3 is to be divided into. Specifically, each partition definition is defined as the three-dimensional data to be synthesized represented by the equations (4) and (5) and the vertices of the specified three-dimensional data represented by the equations (6) and (7). Has a table that describes which partial area belongs to. In each division definition, it is arbitrary how many sub-regions are divided and how large each sub-region is. A division definition with a division number of 1 indicates that no division is actually performed.
  • FIG. 14 shows the flow of processing of the data compression apparatus of this embodiment.
  • the corresponding point determination means 701 of the compression device 700 inputs the 3D data 720 and reads the reference 3D data 71 1 from the storage device 7 10 and inputs it to the top of the reference 3D data 7 1 1 3D Create the 3D data 705 to be synthesized by assigning the vertices of the data 720: Steps S701 to S703.
  • the area dividing means 702 reads out the first partial area determination data 7 1 2 and base 3D data group 7 1 3 to be used first from the storage device 7 10 (step S 7004), and determines the partial area determination.
  • the data 71 2 the synthesis target 3D data 705 and the base 3D data group 71 3 are divided into a plurality of partial regions (step S 705).
  • the coefficient calculation means 703 uses, for each partial area, a combination coefficient ⁇ askp ⁇ for synthesizing the partial area of the synthesis target 3D data ⁇ 05 using the partial area of the base 3D data group 7 1 3.
  • ⁇ Atkp ⁇ is calculated by the same formula as the above formula (8) and formula (9) (step S 706).
  • the compression determination unit 704 includes the coupling coefficients ⁇ askp ⁇ and ⁇ atkp ⁇ calculated for each partial region calculated by the coefficient calculation unit 703 and the basis 3D data used for the synthesis.
  • each subregion of the 3D data is restored by the same formulas (10) and (1 1) described above.
  • the error between the 3D data (Stp 'and Ttp') of the area and the 3D data (Stp and Ttp) of each partial area of the synthesis target 3D data is calculated (step S707).
  • Various criteria can be considered as a measure of error. For example, as shown in the following equation, the distance between the corresponding vertices between the corresponding vertices and the weighted sum of squares of the luminance error The value E can be used as the error.
  • E (I Stp ⁇ Stp ′ [ 2 + we I Ttp ⁇ Ttp ′) M ⁇ (1 2 ′) where M is the number of vertices included in the divided region. If the number of subregions is 2 or more, the final error is the sum of the values calculated by formula (1 2 ') for each subregion. , Various values can be used for the weighting factor we. When it is desired to use the present invention so as to reduce the texture reproduction accuracy, a larger value may be used.
  • the compression determination means 704 determines whether or not the value of the error E is smaller than a predetermined threshold value. If the error is too large (NO in step S 708), control is returned to the area dividing means 705.
  • the area dividing means 705 reads partial area determination data 712 for further finely dividing the partial area from the storage device 7 10 (step S 709), and repeats the processes after step S 705. As a result, a finer coupling coefficient for each partial region is obtained, and it is determined whether or not the desired restoration accuracy is obtained as in the previous case. Subdivision into finer subregions and recalculation of coupling coefficients is continued until a satisfactory error is obtained or there are no more subregion determination data to be subdivided.
  • the compression determination means 704 determines the combination coefficient and partial area determination data 7 1 for each partial area calculated by the coefficient calculation means 302. 2 are output as compressed data 730 (step S 71 0).
  • a multi-stage fine partial area dividing method is determined in advance by the partial area determination data 7 1 2.
  • the first partial region dividing method the whole is made into one partial region (that is, it is not divided).
  • the second partial region is divided into two regions, the upper and lower parts of the face, as shown in Figure 15.
  • the third partial area division method it is divided into four areas as shown in Fig.16.
  • the fourth partial region dividing method it is divided into 8 regions as shown in Fig.17.
  • a multi-stage partial area division method is defined in advance in the partial area determination data 7 12, and first, the coupling coefficient is calculated for the partial areas divided using the first partial area division method. Calculate error E. If this value is larger than the predetermined threshold, the coupling coefficient is calculated for the partial areas divided by applying the second partial area division method, and the error E is calculated. If the error E value is still larger than the predetermined threshold value, divide the area into three parts, such as the third partial area, the fourth partial area, etc. The process is repeated until the maximum number of divided areas is reached. '
  • the region is further divided.
  • the y coordinate is larger than the average value of the y coordinates of all the vertices in the area, it is further divided into two parts, giving a total of three partial areas. If the area where the value of error E did not exceed the threshold value, the process ends, and the newly divided two areas are compressed, restored, and error E is calculated again. Or divide by the value of z coordinate. Force that error E is below the threshold in all partial areas Repeat the process until the predetermined number of divisions is reached. Such a way Thus, by dividing the region where the restoration error E is large, it is possible to efficiently perform compression with less error.
  • the calculation is repeated to divide the synthesis target 3D data into smaller partial areas and obtain the coupling coefficient.
  • the accuracy can be guaranteed below a certain value.
  • the third embodiment of the data restoration device is a compressed 3D data representing the shape of the object. 8 2 0 is input and the original 3D data 8 3 0 is output. And a storage device 8 1 0 connected to the restoration device 8 0 0.
  • the storage device 8 1 0 includes the base 3D data group 6 1 2 of Fig. 1 1 on the data compression side or the base 3D data group 8 1 3 which is exactly the same as the base 3D data group 7 1 3 of Fig. 1 3 1 1 is stored in advance.
  • the decompressor 8 0 0 inputs compressed data 8 3 0 corresponding to the compressed data 6 3 0 of FIG. 1 1 or compressed data 7 3 0 of FIG. 1 3 on the data compression side, and is included in this compressed data 8 2 0
  • Base data reading means 8 0 1 for extracting a partial region of the base three-dimensional data group used for the compression-side composition from the base three-dimensional data group 8 1 1.
  • 3D data restoration means 8 0 for restoring the three-dimensional data 8 3 0 by combining the partial regions of the base 3D data group thus obtained for each same partial region by the coupling coefficient for each partial region included in the compressed data 8 2 0 And two.
  • FIG. 1.9 shows the processing flow of the data restoration apparatus of this embodiment.
  • the basic data reading means 8 0 1 of the decompression device 8 0 0 receives the basic 3D data according to the partial area determination data included in the compressed data 8 2 0.
  • Data group 8 1 1 base 3D data is divided into multiple sub-regions and compressed data 8 2 Output to the three-dimensional data restoring means 8 0 2 together with the coupling coefficient for each partial region included in 0 (step S 8 0 2). Note that if the base three-dimensional data group divided according to the partial determination data is already stored in the storage device 8 10, it is only necessary to read them from the storage device 8 10.
  • the three-dimensional data restoring means 8 0 2 combines the base 3D data group extracted by the base data reading means 8 0 1 for each of the same partial areas by using a coupling coefficient for each partial area. Restore and output (steps S 8 0 3 and S 8 0 4). Note that smoothing processing should be applied to the boundary part between the combined partial areas.
  • an example of the compression / decompression system includes a compression / decompression apparatus 9 0 0 and storage devices 9 1 0 and 9 2 0 connected thereto.
  • the compression / decompression apparatus 9 00 includes a compression apparatus 9 0 1 and a decompression apparatus 9 0 2.
  • the storage device 9 1 0 stores the reference 3D data 9 1 1 and the base 3D data group 9 1 2, and the storage device 9 2 0 stores the compressed data 9 2 1.
  • Compressor 9 0 1 inputs 3D data 9 3 0 representing the shape of the object, and storage device. 9 1 Uses reference 3D data 9 1 1 and base 3D data group 9 1 2 stored in Q Then, the 3D data 9 30 is compressed, and the resulting compressed data 9 2 1 is stored in the storage device 9 2 0.
  • the decompression device 9 0 2 reads the compressed data 9 2 1 from the storage device 9 2 0 and uses the base 3D data group 9 1 2 stored in the storage device 9 1 0 to Perform restoration processing and output the resulting 3D data 94 °.
  • the compression device 9 0 1 the compression device 1 0 0 shown in FIG. 1 can be used.
  • the input 3D data 9 3 0 is the input 3D data 1 2
  • the reference 3D data 9 1 1 is the reference 3D data 1 1
  • the base 3D data group 9 1 2 is the base
  • the 3D data group 1 1 2 and the compressed data 9 2 1 correspond to the compressed data 1 3 0, respectively.
  • the restoration device 9 0 2 may use the restoration device 2 0 0 shown in FIG. it can.
  • the operation of the compression / decompression system of this embodiment at this time is that the output destination in step S 1 0 6 of FIG. 2 is the storage device 9 2 0, and the input source in step S 2 0 1 of FIG. 4 is the storage device The only difference is that it becomes 9 2 0, and the other operations are the same.
  • the compression device 3.01 may be the compression device 3.00 shown in FIG.
  • the input 3D data 9 3 0 is the input 3D data 3 2
  • the reference 3D data 9 1 1 is the reference 3D data 3 1 1
  • the base 3D data group 9 1 2 is the base 3
  • the dimension data group 3 1 2 and the compressed data 9 2 1 correspond to the compressed data 3 3 0, respectively.
  • the restoration device 90 2 can use the restoration device 500 shown in FIG.
  • the operation of the compression / decompression system of this embodiment at this time is that the output destination in step S 3, 0 9 in FIG. 6 is the storage device 9 2, 0: in step S 5 0 1 in FIG. Other operations are the same except that the input source is the storage device 9 2 0.
  • the compression device 400 shown in FIG. 7 can be used as the compression device 901.
  • the input 3D data 9 3 0 is the input 3D data 4 2
  • the reference 3D data 9 1 1 is the reference 3D data 4 1
  • the base 3D data group 9 1 2 is the base 3
  • the dimension data group 4 1 2 and the compressed data 9 2 1 correspond to the compressed data 4 3 0, respectively.
  • the restoration device 90 2 can use the restoration device 500 shown in FIG.
  • the operation of the compression / decompression system of this embodiment at this time is that the output destination in step S 4 06 in FIG. 8 is the storage device 9 2 0, and the input source in step S 5 0 1 in FIG. 10 is stored. The only difference is that it becomes device 9 2 0, and the other operations are the same.
  • the compression device 9 0 1 can use the compression device 6 0 0 shown in FIG.
  • the input 3D data 9 3 0 is the input 3D data 6 2
  • the reference 3D data 9 1 1 is the reference 3D data 6 1 1
  • the base 3D data group 9 1 2 is the base 3D
  • the compressed data 9 2 1 corresponds to the data group 6 13 and the compressed data 6 3 0, respectively, and the same data as the partial area determination data 6 12 is stored in the storage device 9 10.
  • the restoration device 9 0 2 may use the restoration device 8 0 0 shown in FIG. it can.
  • the operation of the compression / decompression system of this embodiment at this time is that the output destination in step S 6 07 in FIG. 12 is the storage device 9 2 0, and the input source in step S 8 0 1 in FIG. 9 is The only difference is that the storage device 9 2 0 becomes 1 ”, and the other operations are the same.
  • the compression device 7 0 0 shown in FIG. 13 can also be used.
  • the input 3D data 9 3 0 is the input 3D data 7 2
  • the reference 3D data 9 1 1 is the reference 3D data 7 1 1
  • the base 3D data group 9 1 2 is the base 3D data
  • the compressed data 9 2 1 corresponds to the data group 7 1 3 and the compressed data 7 3 0, respectively, and the same data as the partial area determination data ⁇ 1 2 is stored in the storage device 9 10.
  • the restoration device 90 2 can use the restoration device 80 shown in FIG.
  • the operation of the compression / decompression system according to the present embodiment at this time is as follows.
  • the output destination in step S 7 10 in FIG. 14 is the storage device 9 2 0.
  • Other operations are the same except that the storage device 9 2 0 becomes different.
  • the storage device 9 2 0 for storing the compressed data 9 2 1 can be realized by any storage device.
  • the storage device 9 2 0 can be detachably portable with respect to the compression / decompression device 90 0 0. It can be realized with a simple storage device.
  • compressed data 9 2 1 including a coupling coefficient for restoring the three-dimensional data using the base three-dimensional data group 9 1 2 is stored.
  • the compressed data 9 2 1 has a smaller data volume than the 3D data 9 30, but the capacity required to store the 3D data can be greatly reduced.
  • the original 3D data when the stored 3D data is required, the original 3D data can be restored from the compressed data 9 2 1 with high accuracy.
  • the compressed data 9 2 1 can be carried freely, and the storage device 9 2 0 can be installed in another compression / decompression system having the same configuration.
  • Application forms can also be realized.
  • a high compression ratio is realized, a large amount of three-dimensional data can be stored even in a small storage device 920 having a small storage capacity.
  • the coupling coefficient is stored in the storage device 9 20, but the basic 3D data group is not stored, even if the storage device 9 2 0 is stolen, the original 3D data is stored. Can not be restored. This ensures data confidentiality.
  • a data transmission device 1 0 0 0 and a data reception device 1 1 0 0 0 are connected through a communication path 1 3 0 0.
  • the data transmission device 1 0 0 0 receives the three-dimensional data 1 0 1 0 representing the shape of the object, and transmits the transmission data 1 2 0 0 including the compressed data compressed through the communication path 1 3 0 0 to the data reception device 1 1 0 0 has a function of transmitting data, and the data receiving device 1 1 0 0 receives the transmission data 1 2 0 0 and restores the 3D data 1 1 1 0 from the compressed data included in it Has a function to output.
  • the data transmission device 1 0 0 0 includes a compression device 1 0 2 0, a storage device 1 0 3 0, and a transmission device 1 0 4 0.
  • the storage device 1 0 30 reference 3D data 1 0 3 1 and a base 3D data group 1 0 3 2 are stored.
  • the compressor 1 0 2 ⁇ inputs 3D data 1 0 1 0, and stores the reference 3D data 1 0 3 1 and the base 3D data group 1 0 3 2 stored in the storage device 1 0 3 0.
  • the three-dimensional data 10 0 10 is used for compression, and the resulting compressed data is output to the data transmission means 1 0 4 1.
  • the transmission apparatus 10 0 40 has data transmission means 1 0 4 1 for transmitting data output from the compression apparatus 1 0 2 0 to a designated communication partner.
  • the data reception device 1 1 0 0 includes a restoration device 1 1 2 0, a storage device 1 1 3 0, and a transmission device 1 1 4.0.
  • the storage device 1 1 3 0 stores a basic three-dimensional data group 1 1 3 1.
  • the transmission device 1 1 4 0 has data transmission means 1 1 4 1 that receives transmission data 1 2 0 0 from the communication channel 1 3 0 0 and inputs it to the restoration device 1 1 2 0.
  • Restoration device 1 1 2 0 is included in transmission data 1 2 0 0 input from data transmission means 1 1 4 1
  • the decompression process of the compressed data is performed using the base 3D data group 1 1 3 1 stored in the storage device 1 1 3 0, and the resulting 3D data 1 1 1 0 is output.
  • the compression device 1 0 2 0 of the data transmission device 1 0 0 0 the compression device 1 0 0 shown in FIG. 1 can be used.
  • the input 3D data 1 0 1 0 is the input 3D data 1 2
  • the reference 3D data 1 0 3 1 is the reference 3D data 1 1 1 and the base 3D data group 1 0 3 2
  • the restoration device 1 1 2 0 of the data reception device 1 1 0 0 can use the restoration device 2 0 0 shown in FIG.
  • the operation of the data transmission system of the present embodiment at this time is that the output destination in step S 1 0 6 in FIG. 2 is the data transmission means 1 0 4 1, and the data transmission means 1 0 4 1 to the data transmission means The difference is that there is an intervening process of transmitting transmission data 1 2 0 0 to 1 1 4.1, and that the input source at step S 2 0 1 in Fig. 4 is data transmission means 1 1''4 1 Just the other operations are the same.
  • the compression device 1 0 2 0 of the data transmission device 1 0 0 0 can use the compression device 3 0 0 shown in FIG.
  • the input 3D data 1 0 1 0 is the input 3D data 3 2
  • the reference 3D data 1 0 3 1 is the reference 3D data 3 1 1 and the basic 3D data group 1 0 3 2
  • the compressed data output to the data transmission means 1 0 4 1 corresponds to the compressed data 3 3 0, respectively.
  • the restoration device 1 1 2 0 of the data receiving device 1 1 0 0 can use the restoration device 5 0 0 shown in FIG.
  • the operation of the compression / decompression system of this embodiment at this time is as follows.
  • the output destination in step S 3 09 in FIG. 6 is the data transmission means 10.
  • the transmission means 1 1 4 1 is involved in the process of transmitting transmission data 1 2 0 0, the input source at step S 5 0 1 in FIG. 10 is the data transmission means 1 1 4 1, and the compression device 1 0 2 0 compression determination means 3 0 3 is the base 3D data group 1 0 3 2
  • the added base 3D data is sent to the data transmission means 1 0 4 1 is sent to the data transmission means 1 1 4 1 through the communication path 1 3 0
  • the data transmission means 1 1 .4 1 is added to the basic 3D data group 1 1 3 1, so that the data transmission device 1 0 0 0 and data receiver 1
  • Other operations are the same except that the matching processing of the base three-dimensional data groups 1 0 3 2 and 1 1 3 1 is different from 1 0 0.
  • the compression device 100 shown in FIG. 7 can be used as the compression device 1 0 2 0 of the data transmission device 1 0 0 0.
  • the input 3D data 1 0 1 0 is the input 3D data 4 2
  • the reference 3D data 1 0 3 1 is the reference 3D data 4 1 1
  • the basic 3D data group 1 0 3 2 corresponds to the basic 3D data group 4 1 2
  • the compressed data output to the data transmission means 1 0 4 1 corresponds to the compressed data 4 3 0.
  • the restoration device 1 1 2 0 of the data receiving device 1 1 0 0 can use the restoration device 5 0 0 shown in FIG.
  • the operation of the compression / decompression system of this embodiment at this time is as follows.
  • the output destination in step S 4 06 in FIG. 8 is the data transmission means 1 0 4 1, and the data transmission means 1 0 4 1 to the data transmission means The only difference is that there is an intervening process of transmitting transmission data 1 2 0 0 to 1 1 4 1 and that the input source in step S 5 0 1 in Fig. 10 is data transmission means 1 1 4 1. Other operations are the same.
  • the compression device 1 0 2 0 of the data transmission device 1 0 0 0 is the compression device shown in FIG.
  • the input 3D data 1 0 1 0 is the input 3D data 6 2
  • the reference 3D data 1 0 3 1 is the reference 3D data 6 1 1
  • the base 3D data group 1 0 3 2 is the base
  • the compressed data output to the data transmission means 1.0 4 1 corresponds to the compressed data 6 3 0 and the same data as the partial area determination data 6 1 2 is stored in the three-dimensional data group 6.1 3
  • the restoration device 1 1 2 0 of the data reception device 1 1 0 0 can use the restoration device 8 0 0 shown in FIG.
  • the operation of the compression / decompression system according to the present embodiment is as follows.
  • step S 8 0 1 of Fig. 1 9 is data transmission means 1 1 4 1 Only it is different from that made, other operations are the same.
  • the compression device 1 0 2 0 of the data transmission device 1 0 0 0 is the compression device shown in FIG.
  • the input 3D data 1 0 1 0 is the input 3D data 7 2
  • the reference 3D data 1 0 3 1 is the reference 3D data 7 1 1
  • the base 3D data group 1 0 3 2 corresponds to the base 3D data group 7 1 3
  • the compressed data output to the data transmission means 1 0 4 1 corresponds to the compressed data 7 3 0, respectively.
  • the same data as 2 is stored in the storage device 1 0 30.
  • the restoration device 1 1 2 0 of the data reception device 1 1 0 0 can use the restoration device 8 0 0 shown in FIG.
  • the operation of the compression / decompression system of this embodiment at this time is as follows.
  • the data compression device, data decompression device, compression decompression system, data transmission device, data reception device, and data transmission system of the present invention realize the functions possessed by hardware as well as a computer and a program. And can be realized.
  • the program is provided by being recorded on a computer-readable recording medium such as a magnetic disk or a semiconductor memory, read by the computer at the time of starting up the computer, etc., and controlling the operation of the computer.
  • the principle of the present invention is to realize a high compression rate by calculating a coupling coefficient between input 3D data and basic 3D data concerning a plurality of objects, and transmitting and receiving this coupling coefficient. For this reason, if the vertices to be compared in the input 3D data are determined in advance, the corresponding point determining means and the reference 3D data can be eliminated. Industrial use available
  • the present invention can be applied to an application in which the data amount of 3D data is reduced and stored.
  • a high compression ratio can be obtained without degrading the resolution and accuracy of the data.
  • 3D data If the network load is reduced when transferring data to other storage devices via a network, etc., it can be applied to any application.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

解像度や精度を低下させずに、高い圧縮率で3次元データ120を圧縮するために、入力3次元データと、複数の物体から得られた基底3次元データ群とから、結合係数を計算し、当該結合係数を圧縮データ130として出力する。即ち、3次元データ120を対応点決定手段101に入力し、当該対応点決定手段101は、頂点の対応関係を決める基準となる参照3次元データ111の頂点に3次元データ120の頂点を対応付けた合成対象3次元データ103を作成する。係数計算手段102は、3次元データの合成に使用する基底3次元データ群112を結合して合成対象3次元データ103を合成するための結合係数を計算し、この計算した結合係数を3次元データ120の圧縮データ130として出力する。

Description

データ圧縮方法及び装置、 データ復元方法及び装置ならびにプログラム
技術分野: 明
本発明は 3次元形状データを圧縮する方法と装置に関し、 特に多数の 3次元物 体の形状またはそれと表面の色情報を、 全体書として少ないデータ容量に圧縮でき るデ一タ圧縮方法及び装置、 そのデータ,復元方法及び装置に関する。 背景技術:'
近年、 3次元物体の形状計測技術の進展により、 幾何学的でない複雑 · 自由形 状の物体の高精度な 3次元形状データが得られるようになり (例えば、 「顔用レン ジファインダ」 電子情報通信学会技術研究報告, vol. 99, No. 118, PRMU 99-223, pp. 35-42 (非特許文献 1 ) 参照)、 グラフィクス生成や画像認識、 ステムなど様々 な分野で 3次元形状データが活用されている。 .
立方体や円筒など幾何学形状の組み合わせでは記述できない、 例えば人体など 複雑な 3次元物体の形状は、通常、物体表面を細かく分割した 3角形や 4角形(ポ リゴン) の小平面の集合として表現され、 その各頂点の 3次元空間での座標値を 並べたデータで記述される.。 そして、 物体表面の色情報は、 各ポリゴンの頂点の 色として輝度値で表わされる。
典型的な 3 Dデータの表現の.一例として、 地球の表面に緯度と経度が決まって いるように、 物体表面に 2次元の座標系(u, v)を定義し、 その座標を適当な間隔で 量子化した地点をポリゴン頂点とし、 その 3次元座標と色 (r,g, b輝度値) をデー タとして記憶する方法がある。 この方法によれば、 一つの物体の 3次元形状と表 面の色情報は、 各画素が(X, y, z, r, g, b)の 6つの要素を持つ画像として考えること ができる。
3次元座標は輝度値よりも値域が広いため、 3次元データは同レベルの解像度 の輝度画像に比べて数倍のデータ量となる。 例えば 3 O cm X 3 O cmの表面積を 1 讓 間隔で量子化すると、 解像度 3 0 0 X 3 0 0 = 9万点の頂点データとなり、 X, y, zのそれぞれを 2バイ ト、 r, g, bのそれぞれを 1バイ トで記述しても 8 0 0キ 口バイ トを超えるデータ量となる。 すなわち、 多数の物体の 3次元データを利用 するシステムでは、 画像処理システム以上に、 記憶、 検索、 ネッ トワーク伝送な どの処理過程において、 データ量の大きさが問題となり、 データ量を圧縮する技 術が必要とされている。
ポリゴン表現された 3次元形状モデルのデータ量を削減するための従来の 3次 元形状データの圧縮装置の一例が、 W. J. Schroeder, J. A. Zarge, W. E. Lorensen, "Decimation of Triangle Meshes", Computer Graphics, 26, 2, 1992, Pages : 65 - 70 (非特許文献 2 ) に記載されている。 図 2 2に示すように、 この従来のデータ圧 縮装置 2 0 0 0は、 頂点選択手段 2 0 0 1と頂点削減手段 2 0 0 2とから構成さ れている。
このような構成を有する従来のデータ圧縮装置 2 0 0 0は、 次のように動作す る。
すなわち、 頂点選択手段 2 0 0 1において、 入力の 3次元データ 2 0 1 0中力 , ら、 消去してしまっても誤差の大きくならないような頂点を選択し、 頂点削減手 段 2 0 0 2において、 前記選択された頂点を消去することで、 ポリゴン数を削減 しデータ量を小さくした 3次元データである圧縮データ 2 0 2 0を生成する。 非 特許文献 2に記載の技術では、 頂点選択手段 2 0 0 1において、 隣接したポリゴ ンの平均の位置にあるポリゴンからの距離が短い頂点を優先的に選択し、 頂点削 減手段 2 0 0 2において、 頂点を消去していく。 これを指定された間引き率に達 するまで繰り返す。 最終的に得られる圧縮データ 2 0 2 0は、 元のデータに比べ て頂点数が削減されており、 データ量が小さい。 同様な技術で、 削減するポリゴ ンの選択方法を改良する技術も多数あり、 その一例として特許第 3 3 4 1 5 4 9 号公報 (特許文献 1 ) に記載の技術などがある。 他方、 データ圧縮に関する技術ではないが、 3次元形状データを生成する技術 の一例;^ Volker Blanz, Thomas Vetter, A Morphable Model For The Synthes i s Of 3 D Faces", . SIGGRAPH 99 Conference Proceedings, Pages : 187-194 (非特許 文献 3 ) に記載されている。 この非特許文献 3では、 あらかじめ多数の顔の 3次 元データを集めて各データ間で対応点を決定して頂点データ化し、 主成分分析を 適用して 1 0 0個程度の基底データを計算し、記憶しておく。 1枚の顔の写真(2 次元画像)が与えられたとき、記憶されている基底データの組み合わせによって、 その 2次元画像で表現された顔と同じ顔の 3次元データを合成し、 出力する。 発明の開示:
発明が解決しようとする課題
第 1の問題点は、 データ圧縮率が低いことである。 その理由は、 ポリゴンを削 減する程度では高い圧縮率がそもそも期待できないためである。
第 2の問題点は、 ポリゴンを削減するため圧縮率を高めるに従って 3次元デー タの解像度が低下することである。 その理由は、 圧縮後のデータの解像度すなわ ちポリゴン数が、 元のデータのポリゴン数に対して圧縮率に比例して低下し、 復 元不可能であるためである。
第 3の問題点は、 記憶する 3次元データの数が多くても圧縮率を高くできない ことである。 その理由は、 個別の 3次元データを独立に同じ方法で圧縮している ためである。
第 4の問題点は、 3次元データの内容に応じた最適な圧縮率や再現精度を達成 できないことである。 その理由は、 任意の 3次元データを同じ方法で圧縮するた めである。
本発明の目的は、 3次元データの解像度 (ポリゴン数) を低下させずに高い圧 縮率 (データ容量を数百分の一以下に圧縮する) を実現できるデータ圧縮方法お よび装置を提供することにある。 特に、 多数の人物の顔の 3次元データなど、 類 似した多数の物体の 3次元データを効率的に圧縮し、 記憶、 伝送するためのデ一 タ圧縮方法および装置を提供することにある。 課題を解決するための手段
本発明の第 1のデータ圧縮装置は、 3次元データを入力し、 頂点の対応関係を 決める基準となる参照 3次元データの頂点に前記入力した 3次元データの頂点を 対応付けた合成対象 3次元データを作成する対応点決定手段と、 3次元データの 合成に使用する基底 3次元データ群を結合して前記合成対象 3次元データを合成 するための結合係数を計算し、 該計算した結合係数を前記入力した 3次元データ の圧縮データとして出力する係数計算手段とを備えることを特徴とする。
本発明の第 2のデータ圧縮装置は、 第 1のデータ圧縮装置において、 前記係数 計算手段で計算された結合係数および前記基底 3次元データ群から 3次元データ を復元し、 該復元した 3次元データと前記合成対象 3次元データとを比較し、 復 元精度が予め定められた精度に満たなレ、場合には、 新たな基底 3次元データを 3 次元データの合成に使用する基底 3次元データ群に追加する圧縮判定手段を備え ることを特徴とする。 、
本発明の第 3のデータ圧縮装置は、 第 1または第 2のデータ圧縮装置において、 前己合成対象 3次元データの合成に適した複数の基底 3次元データを、 3次元デ ータの合成に使用する基底 3次元データ群から選択する基底データ選択手段を備 えることを特徴とする。
本発明の第 4のデータ圧縮装置は、 第 2または第 3のデータ圧縮装置において、 前記圧縮データに、 前記結合係数に加えて、 結合に使用した基底 3次元データを 特定する選択情報を含ませることを特徴とする。
本発明の第 5のデータ圧縮装置は、 第 1のデータ圧縮装置において、 前記合成 対象 3次元データを複数の部分領域に分割する領域分割手段を備え、 前記係数計 算手段は、 同じ部分領域に分割された基底 3次元データ群を結合して前記合成対 象 3次元データを合成するための結合係数を部分領域ごとに計算し、 該計算した 部分領域ごとの結合係数を前記入力した 3次元データの圧縮データとして出力す ることを特徴とする。
本発明の第 6のデータ圧縮装置は、 第 1のデータ圧縮装置において、 前記合成 対象 3次元データを複数の部分領域に分割する領域分割手段と、 前記係数計算手 段で計算された結合係数および前記基底 3次元デ一タ群から 3次元データを復元 し、 該復元した 3次元データと前記合成対象 3次元データとを比較し、 復元精度 が予め定められた精度に満たない場合には、 前記合成対象 3次元データを前記領 域分割手段によって複数の部分領域に分割し、 同じ部分領域に分割された基底 3 次元データ群を結合して前記合成対象 3次元データを合成するための結合係数を 前記係数計算手段によって部分領域ごとに計算し、 該計算した部分領域ごとの結 合係数を前記入力した 3次元データの圧縮データとして出力する圧縮判定手段と を備えることを特徴とする。
本発明の第 7のデータ圧縮装置は、 第 5のデータ圧縮装置において、 前記圧縮 判定手段は、 部分領域に分割して圧縮しても全体の復元精度が予め定められた精 度に満たない場合には、 前記合成対象 3次元データをさらに細かい部分領域に分 割して部分領域ごとに結合係数を求める制御を行うことを特徴とする。
本発明の第 8のデータ圧縮装置は、 第 5、 第 6または第 7のデータ圧縮装置に おいて、 前記圧縮データに、 前記部分領域を特定する部分領域決定データを含ま せることを特徴とする。
本発明の第 9のデータ圧縮装置は、 第 1乃至第 8の何れかのデータ圧縮装置に おいて、 前記圧縮データを記憶する着脱自在な記憶装置を備えることを特徴とす る。
本発明の第 1のデータ復元装置は、 結合係数を含む圧縮データを入力し、 合成 に使用された複数の基底 3次元データを前記圧縮データに含まれる結合係数によ り結合して 3次元データを復元する 3次元データ復元手段を備えることを特徴と する。
本発明の第 2のデータ復元装置は、 合成に使用された基底 3次元データ群の選 択情報および結合係数を含む圧縮データを入力し、 前記選択情報に基づいて圧縮 対象 3次元データの合成に使用された基底 3次元データ群を予め定められた基底 3次元データ群から抽出する基底データ読出手段と、 該抽出された基底 3次元デ 一タ群を前記圧縮データに含まれる結合係数により結合して 3次元データを復元 する 3次元データ復元手段とを備えることを特徴とする。 本発明の第 3のデータ復元装置は、 合成に使用された基底 3次元データ群の部 分領域を特定する部分領域決定データおよび部分領域ごとの結合係数を含む圧縮 データを入力し、 前記部分領域決定データに基づいて圧縮対象 3次元データの合 成に使用された基底 3次元データ群の部分領域を予め定められた基底 3次元デー タ群から抽出する基底デ一ダ読出手段と、 該抽出された基底 3次元データ群を前 記圧縮データに含まれる部分領域ごとの結合係数により同じ部分領域ごとに結合 して 3次元データを復元する 3次元データ復元手段とを備えることを特徴とする。 本発明の第 4のデータ復元装置は、 第 1、 第 2または第 3のデータ復元装置に おいて、 前記圧縮データを記憶する着脱自在な記憶装置を備えることを特徴とす る。
本発明の圧縮復元システムは、 第 1乃至第 8の何れかのデータ圧縮装置および 第 1、 第 2または第 3のデ'ータ復元装置を有する圧縮復元装置と、 該圧縮復元装 置で生成された圧縮データを記憶する記憶装置とを備えたことを特徴とす.る。 本発明の第 1のデータ送信装置は、 第 1乃至第 8の何 かのデータ圧縮装置と、 該データ圧縮装置が使用する参照 3次元データおよび基底 3次元データ群を記憶 する記憶装置と、 前記データ圧縮装置で生成された圧縮データを送信するデータ 伝送手段とを備えたことを特徴とする。
本発明の第 2のデータ送信装置は、 第 1のデータ送信装置において、 前記デー タ伝送手段は、 前記データ圧縮装置が前記基底 3次元データ群に追加した基底 3 次元データを圧縮データの送信先へ伝送することを特徴とする。
本発明の第 1のデータ受信装置は、第 1、第 2または第 3のデータ復元装置と、 該データ復元装置が使用する基底 3次元データ群を記憶する記憶装置と、 圧縮デ ータを受信し前記データ復元装置へ入力するデータ伝送手段とを備えたことを特 徴とする。
本発明の第 2のデータ受信装置は、 第 1のデータ受信装置において、 前記デー タ伝送手段は、 追加の基底 3次元データを受信したとき前記基底 3次元データ群 に追加することを特徴とする。
本発明のデータ伝送システムは、 第 1または第 2のデータ送信装置と第 1また は第 2のデータ受信装置とが通信路を通じて接続されたことを特徴とする。
本発明の第 1のデータ圧縮方法は、 a ) 対応点決定手段が、 3次元データを入 力し、 頂点の対応関係を決める基準となる参照 3次元データの頂点に前記入力し た 3次元デ一タの頂点を対応付けた合成対象 3次元データを作成するステツプ、 b ) 係数計算手段が、 3次元データの合成に使用する基底 3次元データ群を結合 して前記合成対象 3次元データを合成するための結合係数を計算し、 該計算した 結合係数を前記入力した 3次元データの圧縮データとして出力するステップ、 を 含むことを特徴とする。
本発明の第 2のデータ圧縮方法は、 第 1のデータ圧縮方法において、 c ) 圧縮 判定手段が、 前記ステップ bで計算された結合係数および前記基底 3次元データ 群から 3次元データを復元し、 該復元した 3次元データと前記合成対象 3次元デ 一タとを比較し、 復元精度が予め定められた精度に満たない場合には、 新たな基 底 3次元データを 3次元データの合成に使用する基底 3次元データ群に追加する ステップ、 を含むことを特徴とする。
本発明の第 3のデータ圧縮方法は、 第 1または第 2のデータ圧縮方法において、 d ) 基底データ選択手段が、 前記合成対象 3次元データの合成に適した複数の基 底 3次元データを、 3次元データの合成に使用する基底 3次元データ群から選択 するステップ、 を含むことを特徴とする。
本発明の第 4のデータ圧縮方法は、 第 2または第 3のデータ圧縮方法において、 前記圧縮データに、 前記結合係数に加えて、 結合に使用した基底 3次元データを 特定する選択情報を含ませることを特徴とする。 .
本発明の第 5のデータ圧縮方法は、 a ) 対応点決定手段が、 3次元データを入 力し、 頂点の対応関係を決める基準となる参照 3次元データの頂点に前記入力し た 3次元データの頂点を対応^ t.けた合成対象 3次元データを作成するステップ、 b ) 域分割手段が、 前記合成対象 3次元データを複数の部分領域に分割するス テツプ、 c ) 係数計算手段が、 3次元データの合成に使用する同じ部分領域に分 割された基底 3次元データ群を結合して前記合成対象 3次元データを合成するた めの結合係数を部分領域ごとに計算し、 該計算した部分領域ごとの結合係数を前 記入力した 3次元データの圧縮データとして出力するステップ、 を含むことを特 徴とする。
本発明の第 6のデータ圧縮方法は、 a ) 対応点決定手段が、 3次元データを入 力し、 頂点の対応関係を決める基準となる参照 3次元データの頂点に前記入力し た 3次元データの頂点を対応付けた合成対象 3次元データを作成するステップ、 b ) 係数計算手段が、 3次元データの合成に使用する基底 3次元データ群を結合 して前記合成対象 3次元データを合成するための結合係数を計算し、 該計算した 結合係数を前記入力した 3次元データの圧縮データとして出力するステップ、 c ) 圧縮判定手段が、 前記ステップ bで計算された結合係数および前記基底 3次元デ ータ群から 3次元データを復元し、 該復元した 3次元データと前記合成対象 3次 元データとを比較し、 復元精度が予め定められた精度に満たない場合には、 前記 合成対象 3次元データを 記領域分割手段によって複数の部分領域に分割し、 同 じ部分領域に分割された基底 3次元データ群を結合して前記合成対象 3次元デー タを合成するための結合係数を前記係数計算手段によって部分領域ごとに計算し、 該計算した部分領域ごとの結合係数を前記入力した 3次元データの圧縮データと して出力するステップ、 を含むことを特徴とする。
本発明の第 7のデータ圧縮方法は、 第 6のデータ圧縮方法において、 部分領域 に分割して圧縮しても全体の復元精度が予め定められた精度に満たない場合には 前記合成対象 3次元データをさらに細かい部分領域に分割して部分領域ごとに結 合係数を求めることを特徴とする。
本発明の第 8のデータ圧縮方法は、 第 5、 .第 6または第 7のデータ圧縮方法に おいて、 前記圧縮データに、 前記部分領域を特定する部分領域決定データを含ま せることを特徴とする。
本発明の第 9のデータ圧縮方法は、 第 1乃至第 8の何れかのデータ圧縮方法に おいて、 前記圧縮データを着脱自在な記憶装置に記憶することを特徴とする。
本発明の第 1のデータ復元方法は、 3次元データ復元手段が、 結合係数を含む 圧縮データを入力し、 合成に使用された複数の基底 3次元データを前記圧縮デー タに含まれる結合係数により結合して 3次元データを復元することを特徴とする。 本発明の第 2のデータ復元方法は、 a ) 基底データ読出手段が、 合成に使用さ れた基底 3次元データ群の選択情報および結合係数を含む圧縮データを入力し、 前記選択情報に基づいて圧縮対象 3次元データの合成に使用された基底 3次元デ 一タ群を予め定められた基底 3次元データ群から抽出するステップ、 3次元デー タ復元手段が、 前記抽出された基底 3次元データ群を前記圧縮データに含まれる 結合係数により結合して 3次元データを復元するステップ、 を含むことを特徴と する。
本発明の第 3のデータ復元方法は、 a ) 基底データ読出手段が、 合成に使用さ れた基底 3次元データ群の部分領域を特定する部分領域決定データおよび部分領 域ごとの結合係数を含む圧縮データを入力し、 前記部分領域決定データに基づい て圧縮対象 3次元データの合成に使用された基底 3次元データ群の部分領域を予 め定められた基底 3次元データ群から抽出するステップ、 b ) 3次元データ復元 手段が、 前記抽出された基底 3次元データ群を前記圧縮データに含まれる部分領 域ごとの結合係数により同じ部分領域ごとに結合して 3次元データを復元するス テツプ、 を含むことを特徴とする。
本発明の第 4のデータ復元方法は、 第 1、 第 2または第 3のデータ復元方法に おいて、 前記圧縮データを着脱自在な記憶装置から入力することを特徴とする。 本発明の圧縮復元方法は、 第 1乃至第 8の何れかのデータ圧縮方法で生成され た圧縮データを記憶装置に記憶し、 該記憶装置から読み出した圧縮データを第 1、 第 2または第 3のデータ復元方法で 3次元データに復元することを特徴とする。 本発明の第 1のデ―タ送信方法は、 第丄乃至第 8の何れかのデータ圧縮方法で 生成された圧縮データを、 データ伝送手段を通じて伝送することを特徴とする。 本発明の第 2のデータ送信方法は、 第 1のデータ送信方法において、 前記デ一 タ伝送手段は、 前記データ圧縮方法において前記基底 3次元データ群に追加され た基底 3次元データを圧縮データの送信先へ伝送することを特徴とする。
本発明の第丄のデータ受信方法は、 データ伝送手段で受信した圧縮データを第
1、 第 2または第 3のデータ復元方法により 3次元データに復元することを特徴 とする。 本発明の第 2のデータ受信方法は、 第 1のデータ受信方法において、 前記デー タ伝送手段は、 追加の基底 3次元データを受信したとき前記データ復元方法で使 用する基底 3次元データ群に追加することを特徴とする。
本発明のデータ伝送方法は、 第 1または第 2のデータ送信方法と第 1または第 2のデータ受信方法とを組み合わせたことを特徴とする。
本発明は、 入力された 3次元データを別の 3次元データによつて効率的に圧縮 する。 すなわち、 参照 3次元データを基準 、 入力された 3次元データと基底 3 次元デ一タ群との間で対応する頂点を決定し、 基底 3次元データ群のすべてまた は基底 3次元データ群中から選択した一部の基底 3次元データ群を線形結合する ことによって入力 3次元データと同じ 3次元データを合成するための結合係数を 計算し、 この結合係数を入力 3次元デ タの圧縮データとする。 またその復元時 は、 圧縮データが示す結合係数に従って、 合成に使用された基底 3次元データを 結合することによって元の 3次元データを復元する。
このように本発明では、 基底 3次元データ群を結合する結合係数のデータ量が 元の 3次元データのデータ量よりも遥かに少ないことを利用する。 非特許文献 3 とは異なり、 3次元データを入力とし、 この入力 3次元データを基底 3次元デー タ群の組み合わせによって合成するための結合係数を計算する。 結合係数を入力 3次元データの代替とすることにより、 3次元データの記憶や伝送に必要なデー ' タ量を圧縮する。 さらに、 結合係数の計算に用いる基底 3次元データ群は、 事前 に集めた複数の 3次元データから主成分分析によって計算した基底データであつ ても良いし、 3次元データそのものであっても良い。
発明の効果
第 1の効果は、 3次元データを極めて高い圧縮率で圧縮できることである。 そ の理由は、 数万〜数十万点に及ぶ頂点データである 3次元形状データを、 数百個 程度の結合係数から構成されるデータに圧縮でき、 データ容量を数百分の一以下 に圧縮することができるためである。
第 2の効果は、 圧縮された 3次元データの解像度が低下しないことである。 そ の理由は、 復元される 3次元データは合成に使用された基底 3次元データと同じ 解像度になり、 これらが元の 3次元データと同等以上に高解像度であれば解像度 が低下しないためである。
第 3の効果は、 特に、 大量の 3次元データを記憶するデータべ一スシステムな どにおいて、 新たに追加されるデータの記憶や伝送に必要となる記憶容量を大幅 に削減できることである。 その理由は、 新たなデータを追加記憶する際に、 既存 のデータを基底 3次元データに用いて新たなデータを結合係数に変換し、 この結 合係数を記憶すれば良いためである。
第 4の効果は、 入力 3次元データに応じて最適な基底データを選択して用いる 構成を採用すれば、 データ圧縮に必要な計算量や、 復号後のデータの精度劣化を 抑えられることである。
第 5の効果は、 圧縮後のデータが秘匿性を持つことにある。 その理由は、 結合 係数のみでは、 元の 3次元データが復元できないためである。 図面の簡単な説明:
図 1は本発明のデータ圧縮装置の第 1の実施の形態のプロック [¾である。
図 2は本発明のデータ圧縮'装置の第 1の実施の形態の処理例を示すフローチヤ ートである。
図 3は本発明のデータ復元装置の第 1の実施の形態のブロック図である。
図 4は本発明のデータ復元装置の第 1の実施の形態の処理例を示すフローチヤ 一トである。
図 5は本発明のデータ圧縮装置の第 2の実;^の形態のブロック図である。
図 6は本発明のデータ圧縮装置の第 2の実施の形態の処理例を示すフローチヤ ートである。
図 7は本発明のデータ圧縮装置の第 3の実施の形態のプロック図である。
図 8は本発明のデータ圧縮装置の第 3の実施の形態の処理例を示すフローチヤ ―トである。
図 9は本発明のデータ復元装置の第 2の実施の形態のプロック図である。
図 1 0は本発明のデータ復元装置の第 2の実施の形態の処理例を示すフローチ ャ一トである。
図 1 1は本発明のデータ圧縮装置の第 4の実施の形態のプロック図である。 図 1 2は本発明のデータ圧縮装置の第 4の実施の形態の処理例を示すフローチ ヤー卜である。
図 1 3は本発明のデータ圧縮装置の第 5の実施の形態のブロック図である。 図 1 4は本発明のデータ圧縮装置の第 5の実施の形態の処理例を示すフローチ ヤートである。
図 1 5は顔の 3次元データの分割方法の一例を示す図である。
図 1 6は顔の 3次元データの分割方法の他の例を示す図である。
図 1 7は顔の 3次元データの分割方法の別の例を示す図である。
図 1 8は本発明のデータ復元装置の第 3の実施の形態のブロック図である。 図 1 9は本発明のデータ復元装置の第 3の実施の形態の処理例を示すフローチ ヤートである。
図 2 0は本発明の圧縮復元システムの実施の形態のブロック図である。
図 2 1は本発明のデータ伝送システムの実施の形態のブロック図である。
図 2 2は従来のデータ圧 装置のブロック図である。 符号の説明
1 0 0…圧縮装置
1 0 1…対応点決定手段
1 0 2…係数計算手段
1 0 3…合成対象 3次元データ
1 1。…記憶装置
1 1 1…参照 3次元データ
1 1 2…基底 3次元データ群
1 2 0…入力 3次元データ
1 3 0…圧縮データ 発明を実施するための最良の形態:
次に本発明の実施の形態について図面を参照して詳細に説明する。
『データ圧縮装置の第 1の実施の形態』
図 1を参照すると、 本発明のデータ圧縮装置の第 1の実施の形態は、 物体の形 状を表す 3次元データ 1 2 0を入力してその圧縮データ 1 3 0を出力する圧縮装 置 1 0 0と、 それに接続された記憶装置 1 1 0とで構成される。
記憶装置 1 1 0には、 参照 3次元データ 1 1 1と基底 3次元データ群 1 1 2と が予め記憶されている。 本発明は、 複数の 3次元データを線形結合して 3次元デ ータ 1 2 0を合成するための結合係数を 3次元データ 1 2 0の圧縮データとする ため、 合成に使用する複数の 3次元データと入力の 3次元データ 1 2 0は頂点が 対応付けられている必要がある。 記憶装置 1 1 0に記憶されている参照 3次元デ ータ 1 1 1は、 このよう 頂点の対応関係を決める基準となる 3次元データであ る。 また、 .基底 3次元データ群 1 1 2は、 合成に使用する複数の 3次元データに 相当する。 個々の基底 3次元データは、 参照 3次元データ 1 1 1の頂点に或る物 体の 3次元データの頂点を対応付けることにより生成された 3次元データそのも の、 或いは、 そのようにして'作成された多数の物体についての 3次元データから 主成分分析などの計算によって求めた基底データである。
圧縮装置 1 0 0は、 参照 3次元データ 1 1 1の頂点に入力の 3次元データ 1 2 0の頂点を対応付けた合成対象 3次元データ 1 0 3を作成する対応点決定手段 1 0 1と、 基底 3次元データ群 1 1 2に含まれる複数の基底 3次元データを結合し て合成対象 3次元データ 1 0 3を合成するための結合係数を計算し、 この計算し た結合係数を入力 3次元データ 1 2 0の圧縮データ 1 3 0として出力する係数計 算手段 1 0 2とを備えている。
図 2は本実施の形態のデータ圧縮装置の処理の流れを示す。 図 1に示すデータ 圧縮装置の処理動作を図 2をも参照して説明する。 まず、 圧縮装置 1 0 0の対応 点決定手段 1 0 1は、 3次元データ 1 2 0を入力すると共に記憶装置 1 1 0力 ら 参照 3次元データ 1 1 1を読み出し (ステップ S 1 0 1、 S 1 0 2 )、 参照 3次元 データ 1 1 1の頂点に 3次元データ 1 2 0の頂点を対応付けた合成対象 3次元デ ータ 103を作成する (ステップ S 103)。 次に、 係数計算手段 102は、 記憶 装置 1 10から基底 3次元データ群 1 1 2を読み出し (ステップ S 104)、 基底 3次元データ群を結合して合成対象 3次元データ 103を合成するための結合係 数を計算し (ステップ S 105)、 計算した結合係数を 3次元データ 1 20の圧縮 データ 1 30として出力する (ステップ S 106)。 .
以下、 本実施の形態にかかるデータ圧縮装置の動作をより詳細に説明する。 まず、 データ圧縮を行う対象の 3次元データ 1 20を入力する (ステップ S 1 01)。 対象となる 3次元データ 1 20は様々なものが可能であるが、 ここでは、 人の顔の 3次元データを圧縮する例をあげて説明する。 3次元データの入力には 様々な方法があるが、 一例として、 3次元計測装置で計測する方法がある。 これ には、 一例として、 非特許文献 3に記載の計測技術を用いた計測装置を使うこと もできる。 この技術によって得られた 3次元データは、 多数の計測ポイント (頂 点) について 3次元座標とテクスチャ (表面の色) 画像の輝度値を持つポリゴン データとなる。 ここでは一例として、 入力 3次元データ 1 20は 1 0万点の頂点 を持ち、 3次元座標の X y z値のそれぞれが 1 6ビット浮動小数点、 テクスチャ 輝度値の r g b値のそれぞれが 8ビット整数でそれぞれ表されているとする。 こ の場合、 入力 3次元データ 1 20のデータ量は 100000 X (3 X 2 + 3 X 1) バイ ト、 すなわち約 900キロバイ トになる。
次に、 頂点の対応関係を決める基準となる参照 3次元データ 1 1 1を記憶装置 1 10から読み出す (ステップ S 102)。 参照 3次元データ 1 1 1は、 或る特定 の人物の顔の 3次元データでも良いし、 基底, 3次元データ群 1 1 2で対象とした 複数の人物など、 複数の人物の顔の 3次元データの平均値であっても良い。 ここ では一例として、 参照 3次元データ 1 1 1は 9万点の頂点を持ち、 入力 3次元デ ータ 1 20と同じく、 単位が [mm] の 3次元座標が 3つの 1 6ビット浮動小数 点で表され、 テクスチャ輝度値が RGBの 3つの 8ビット整数の輝度値 (0力 ら 255) で表されているとする。 参照 3次元データ 1 1 1の i番目の頂点の 3次 元座標を (xri, yri, zri)、 テクスチャ輝度値を (rri, gri, bri) とすると、 参 照 3次元データ 1 1 1は 3次元形状とテクスチヤ画像それぞれが各頂点の座標値 および輝度値を並べた一つ.のべク トルデータとして以下のように表される。
Sr=[xrl, yrl, zrl, xr2, yr2, zr2, ■···, xr90000, yr90000, zr90000] ··■ (1) Tr=[rrl, grl,. brl, rr2, gr2, br2, ···, rr90000, gr90000, br90000] … (2) 次に、 参照 3次元データ 1 1 1の各頂点に対応する入力 3次元データ 120の 頂点を決定する (ステップ S 103)。 これには様々な方法が適用可能であるが、 一例として、 最も 3次元座標とテクスチャ輝度値の近い頂点を探索する方法を用 いることができる。 たとえば、 入力 3次元データ 1 20の; j番目の頂点の 3次元 座標を (xtj, ytj, ztj)、 テクスチャ輝度を (rtj, gtj, btj) とし、 次式のコス ト関数 Cを定義する。
C(i, j) = {(xri-xtj)2+ (yri-ytj)2+ (zri- ztj)2}+ w{ (rri-rt j)2+ (gri-gtj)2+ (bri-btj)2} … (3) 、
参照 3次元データ 1 1 1の i番目(i= 1 , ···, 9.0000)の頂点に対応する入 力 3次元データ 1 20の頂点は、 コス ト関数 C(i, j)を最小化する頂点 j を入力デ —タ 1 20の頂点の中から探すことで決定できる。 また、 Cの値が小さい複数の 頂点を集めて平均を取った頂点を対応点として定義するなどして、 精度を高める ことも可能である。 重み wには様々な値を用いることができるが、 一例として w = 1. 0としてもよレヽ。
対^点決定がなされた入力 3次元データである合成対象 3次元データ 103は、. 3次元形状データとテクスチャ画像データそれぞれが、 各頂点の座標値または輝 度値を並べた一つのベク トルデータとして表される。 すなわち、 参照 3次元デー タ.1 1 1の頂点 iに対応する入力 3次元データ 1 20の頂点を j (i)とすると、 合 成対象 3次元データの形状とテクスチャはそれぞれ次のべク トル St、 Ttで表され る。
St-[xrj(l), yrj(l), zrj(l), xr j (2) , yr j (2) , zr j (2) , ·■·, xrj (90000), yr j (90000) , zrj (90000)] … (4)
Tt=[rrj(l), grj(l), brj(l), rrj(2), gr j (2) , br j (2) , ···, rrj (90000), gr j (90000) , brj (90000)] … (5)
次に、 あらかじめ定めた十分な数の物体の 3次元データ群である基底 3次元デ ータ群 1 1 2を記憶装置 1 .1 0から読み出す (ステップ S 1 0 4 )。 基底 3次元デ —タ群 1 1 2は、 次の何れのタイプでも良い。 a ) 3次元データタイプ:基底 3 次元データ群 1 1 2を構成するすべての基底 3次元データが人物の顔の 3次元デ —タそのものを使用するタイプ。 b ) 基底データタイプ:基底 3次元データ群 1 1 2を構成するすべての基底 3次元データが、 集めた多数の人物の顔の 3次元デ —タから計算によって求めた基底データであるタイプ。 この一例としては、 非特 許文献 3に記載の技術のように、 平均 3次元データと主成分分析によって得られ た基底データとを用いる とができる。 c ) 混在タイプ:基底 3次元データ群 1 1 2を構成する一部の基底 3次元データが、 集めた多数の人物の顔の 3次元デー タから計算によって求めた基底データであり、 残りの基底 3次元データが人物の 顔の 3次元デ一タそのものであるタイプ。
何れのタイプにおいても、 基底 3次元データ群 1 1 2は、 ステップ S 1 0 4に おける対応点決定処理と同様の処理が既になされている。 ここでは、 基底 3次元 データ群 1 1 2は 3次元データタイプを使用するものとする。 基底 3次元データ 群 1 1 2は、 3次元形状とテクスチャがべク トルで表され、 参照 3次元データ 1 1 1の頂点 j に対応する頂点'を j (i)とすると、 k番目の基底 3次元データの 3次 元形状 S bkとテクスチャ Tbkはそれぞれ以下のように表される。
Sbk= [xbkj (1), ybkj (1) , zbkj (1), xbkj (2) , ybkj (2), zbkj (2) , ·■· , xbkj (90000), ybkj (90000) , zbkj (90000) ]
… (6 )
Tbk= [rbkj (1) , gbkj (1) , bbkj (1) , rbkj (2) , gbkj (2) , bbkj (2), · · ·, rbkj (90000), gbkj (90000) , bbkj (90000),]
… ( 7 )
基底 3次元データの数は多いほど圧縮されたデータから復元される 3次元デ一 タの精度は向上するが、 データ圧縮の計算量や記憶容量が増加する。 ここでは、 一例として 1 0 0人の人物の顔の 3次元データを事前に集めたものを使用する。 次に、 基底 3次元データ群 1 1 2を用いて合成対象 3次元データ 1 0 3を合成 するための係数を計算する (ステップ S 1 0 5 )。 n (一例として n = 1 0 0 ) 個 の基底 3次元データを用いる場合は、 次式の線形最小二乗法を用いて合成対象 3 次元データ 1 0 3の形状、 テクスチャを記述するそれぞれ n個の係数 {ask}, {a tk} (k = 1, ···、 1 0 0) を求める。
Figure imgf000019_0001
次に、 計算された係数データ {ask}, {atk}を入力 3次元データ 1 2 0の圧縮 データ 1 3 0として出力する (ステップ S 1 0 6)。 一例として、 係数データを 1 6ビット浮動小数点で求める場合、 係数データのデータ量は 2 X 1 0 0 X 2 = 4 0 0バイ トになる。
『データ復元装置の第 1の実施の形態』 .
次に、 図 1に示した第 1の実施の形態のデータ圧縮装置により生成された圧縮 データから元の 3次元データを復元するデータ復元装置の構成例について説明す る。
図 3を参照すると、 データ'復元装置の第 1の実施の形態は、 物体の形状を表す 3次元データの圧縮データ 2 2 0を入力して元の 3次元データを出力する復元装 置 2 0 0と、 それに接続された記憶装置 2 1 0とで構成される。
記憶装置 2 1 0には、 データ圧縮側の図 1の基底 3次元データ群 1 1 2と全く 同一の基底 3次元データ群 2 1 1が予め記憶されている。
復元装置 2 0 0は、 データ圧縮側の図 1の圧縮データ 1 3 0に相当する圧縮デ ータ 2 2 0を入力し、 基底 3次元データ群 2 1 1を圧縮データ 2 2 0で示される 結合係数により結合した 3次元データを生成して出力する 3次元データ復元手段 2 0 1を備えている。
図 4は本実施の形態のデータ復元装置の処理の流れを示す。 復元装置 2 0 0の 3次元データ復元手段 20.1は、 圧縮データ 220を入力すると共に記憶装置 2 1 ◦から基底 3次元データ群 2 1 1を読み出し (ステップ S 201、 S 202)、 基底 3次元データ群 2 1 1を圧縮データ 220が示す結合係数に従って結合して 3次元データを復元し出力する (ステップ S 203、 S 204)0
圧縮データ 220を {ひ sk}, {atk} (k = 1 , ···、 .100)、 基底 3次元データ 群 21 1の 3次元形状とテクスチャを前記 (6)、 (7) 式で表される Sbk、 Tbkと すると、 復元される 3次元データの 3次元形状とテクスチャを表すべク トノレ St, と Tt' は次式で計算される。
100
St = ^( skSbk) (10)
K-l
Figure imgf000020_0001
次に、 図 1のデータ圧縮装置および図 3のデータ復元装置の効果について説明 する。
本実施の形態のデータ圧縮装置では、 基底 3次元データ群 1 1 2を用いて 3次 元データ 1 20を復元するための係数データを当該 3次元データ 1 20の圧縮デ ータとして生成するように構成されており、 係数データは 3次元データに比べて はるかにデータ量が小さいため、 高い圧縮率を実現できる。 ここで説明に用いた 例では、 入力 3次元データが 900キロバイ トであるのに対し、 係数データはわ ずか 400バイ トである。
また、 本実施の形態のデータ復元装置では、 復元される 3次元データ 230は 基底 3次元データ群 2 1 1の組み合わせで計算され、 頂点の数は基底 3次元デー タ群 2 1 1と同じになるように構成されているため、 きわめて高い圧縮率を達成 しているにもかかわらず、 データ圧縮、 復元による頂点数の減少による解像度の 低下が少ない。 一例としてここで説明した例では、 圧縮前の入力 3次元データは
1 0万頂点、 圧縮対象 3次元データは 9万頂点であるので、 復元される 3次元デ —タは 9万頂点である。 従来の技術で 1 0万頂点を 9万頂点に削減しだ場合、 デ —タ量は 1 0 %しか減らないが、 本発明ではそれよりはるかに高い圧縮率を実現 できる。
なお、 ここで説明に用いた、 入力 3次元データの頂点数、 基底 3次元データの 数、 参照 3次元データの頂点数、 形状データや輝度データの数やビッ ト数などの 数値はあくまで一例であり、 様々に変更可能であることはいうまでもない。 この 点は、 以下の異なる実施の形態の説明においても同様である。
『データ圧縮装置の第 2の実施の形態』
図 5を参照すると、データ圧縮装置の第 2の実施の形態は、圧縮装置 3 0 0が、 対応点決定手段 3 0 1および係数計算手段 3 0 2に加えて圧縮判定手段 3◦ 3を 備えている点で、 図 1の第 1の実施の形態にかかる.データ圧縮装置と相違する。 圧縮判定手段 3 0 3は、 係数計算手段 3 0 2で計算された結合係数および基底 3次元データ群 3 1 2から 3次元データを復元し、 この復元した 3次元データと 合成対象 3次元データ 3 0 4とを比較し、 復元精度が予め定められた精度に満た ない場合には、 合成対象 3次元データ 3 0 4を基底 3次元データ群 3 1 2に追加 した後、 係数計算手段 3 0 2に再計算を行わせ、 復元精度が予め定められた精度 を満たす場合には、 係数計算手段 3 0 2で計算された結合係数と合成に使用され た基底 3次元データ群 3 1 2'を特定する基底選択データとを圧縮データ 3 3 0と して出力する。
.入力 3次元データ 3 2 0、 参照 3次元データ 3 1 1および基底 3次元デ一タ群 3 1 2の各データは、 図 1の入力 3次元データ 1 2 0、 参照 3次元データ 1 1 1 および基底 3次元データ群 1 1 2と同じであり、 対応点決定手段 3 0 1および係 数計算手段 3 0 2は図 1の対応点決定手段 1 0 1および係数計算手段 1 0 2と機 能的に同じである。
図 6は本実施の形態のデータ圧縮装置の処理の流れを示す。 まず、 圧縮装置 3 0 0の対応点決定手段 3 0 1は、 3次元データ 3 2 0を入力すると共に記憶装置 3 1 0から参照 3次元データ 3 1 1を読み出し、 参照 3次元データ 3 1 1の頂点 に入力 3次元データ 320の頂点を対応付けた合成対象 3次元データ 304を作 成する (ステップ S 301〜S 303)。 次に、 係数計算手段 302は、 記憶装置 3 1 0から基底 3次元データ群 3 1 2を読み出し、 基底 3次元データ群 3 1 2を 結合して合成対象 3次元データ 304を合成するための結合係数を計算する (ス テツプ S 304、 S 305)。 ここまでは、 図 1の実施の形態のデータ圧縮装置と 同じ動作である。
次に、 圧縮判定手段 303は、 係数計算手段 302で計算された結合係数を {ひ sk}, {atk} (k= l, ··'、 100)、 合成に使用された基底 3次元データ群を式 (6) および式 (7) で示される Sbkおよび Tbk とすると、 前述した式 (10)、 (1 1) によって 3次元データ (St' と丁 ) を復元し、 この復元した 3次元デ —タと合成対象 3次元データ (St と Tt) 304との誤差を計算する (ステップ S 306)。 誤差の尺度としては様々な基準が考えられるが、 その一例として、 次 式で示されるような、 対応する頂点の間の 3次元座標の距離と輝度の誤差の重み 付き 2乗和の値 Eを誤差として用いることができる。
E= I St- St' I 2 + we I Tt-Tt' I 2 ■·· (1 2)
重み係数 weには様々な値を用いることができる力 一例として 1· 0とする。 テクスチャの再現精度を良くするように本発明を用いたい場合は、 より大きい値 を用いれば良い。
次に、 圧縮判定手段 303は、 誤差 Eの値が予め定められた閾値より小さいか どうかを判定する。 誤差が大きすぎる場合には (ステップ S 307で NO)、 合成 対象 3次元データ (St と Tt) 304を基底 3次元データ群 31 2に追加し (ス テツプ S 308)、 追加後の基底 3次元データ群 31 2に基づいて係数計算手段 3 02に結合係数の再計算を行わせる (ステップ S 304)。 他方、 誤差 Eが予め定 められた閾値より大きくない場合 (ステップ S 307で YE S:)、 係数計算手段 3 02で計算された結合係数と合成に使用された基底 3次元データ群 3 1 2を特定 するための基底選択データとを圧縮データ 330として出力する (ステップ S 3 09)。
ステップ S 308における基底 3次元データ群 3 1 2への新たな 3次元データ の追加は、 具体的には以下.のような方法で行われる。
a ) 方法 1
基底 3次元データ群 3 1 2を構成するすべての基底 3次元データが人物の顔の 3次元データそのものを使用する 3次元データタイプの場合、 新たな 3次元デー タを基底 3次元データ群 3 1 2の最後のデータとして追加する。.例えば、 基底 3 次元データ群 3 1 2に 1番から 1 0 0番まで番号付けされた 1 0 0個の 3次元デ ータがある場合、 新たな 3次元データを 1 0 1番目のデータとして追加する。 そ して、 元の 1 0 0個の 3次元データで十分な精度で復元できた場合には、 圧縮デ —タ 3 3 0には 1番から 1 0 0番までの基底 3次元データを選択するデータを含 め、 1個追加した 1 0 1個の 3次元データで十分な精度で復元できた場合には、 圧縮データ 3 3 0には 1番から 1 0 1 までの基底 3次元データを選択するデー タを含める。
b ) 方法 2
基底 3次元データ群 3 1 2を構成するすべての基底 3次元データが多数の人物 の顔の 3次元データから計算によって求め、 当該基底データを使用する基底デー タタイプの場合で、 以後も同'タイプを維持する場合には、 元の基底 3次元データ 群を計算したときの 3次元データ群に新たな 3次元データを加えて、 主成分分析 などの計算をやり直し、 新たな基底 3次元データ群を生成する。 この場合、 基底 3次元デ一ダ群が 1つ増えるので、 圧縮データ 3 3 0中にどの基底 3次元データ 群を使用したかを示すデータを基底選択データとして含ませる。 なお、 基底 3次 元データ群.を再計算する場合、 基底 3次元データの数は以前に比べて増やしても 良いし、 増やさなくても良..い。
c ) 方法 3
基底 3次元データ群 3 1 2を構成するすべての基底 3次元データが多数の人物 の顔の 3次元データから計算によって求めた基底データであり、 当該基底データ を使用する基底データタイプの場合で、 以後、 混在タイプに変更する場合、 ある いは、 既に混在タイプである場合、 方法 1と同様に、 新たな 3次元データそのも のを新たな基底 3次元データとして追加する。 この場合、 基底 3次元データが 1 つ増えるので、 圧縮データ 3 3 0中にどの基底 3次元データ群を使用したかを示 すデータを基底選択データとして含ませる。
方法 1〜3にはそれぞれ一長一短がある。 方法 1および方法 3は、 主成分分析 を行う計算時間がかからないという利点と、 基底に追加した 1個の 3次元データ のみを記憶し、 また後述するデータ伝送システムでは復元側に伝送するだけで済 む利点がある。 なお、 本実施の形態では、 入力 3次元データ 3 2 0から導出した 合成対象 3次元データ 3 0 4を新たな基底 3次元データとして追加しているが、 記憶装置 3 1 0に既に記憶されている 1以上の 3次元データを追加するようにし ても良く、 その場合には既に記憶されているので新たな記憶は必要なく、 また後 述するデータ伝送システムにおける復元側にも既に同じ 3次元データが記憶され ているならば伝送する必要もない。 しかし、 方法 1および方法 3は、 式 (1 0 )、 ( 1 1 ) による復元計算が方法 2より遅くなる欠点がある。
方法 2は、 式 (8 )、 (9 ) の計算が高速に行える利点があるが、 当然、 主成分 分析の計算に時間がかかる。 また、 基底をすベて計算し直すと、 すべての基底 (S bl〜S blOO) が変化してしまう。 式 (1 .0 )、 ( 1 1 ) による復号を行う場合、 係 数データを計算した時と同じ基底 3次元データが必要であるため、 これら 1 0 0 個をすベて追加して記憶しなければならず、 また、 後述するデータ伝送システム では復元側に伝送しなければならない。 このため、 基底データを記憶する容量が 膨大になるという欠点がある。
次に、 本実施の形態のデータ圧縮装置の効果について説明する。
本寒施の形態のデータ圧縮装置では、 多様な入力 3次元データを十分な精度で 記述できる基底 3次元データを予め用意しておくことが難しい場合にも、 システ ムを運用しながら必要に応じて基底 3次元データを追加するように構成されてお り、 予め用意した基底 3次元データが不十分なものであっても、 精度を低下させ ずにデータ圧縮を行うことが可能となる。
『データ圧縮装置の第 3の実施の形態』
図 7を参照すると、データ圧縮装置の第 3の実施の形態は、圧縮装置 4 0 0が、 対応点決定手段 4 0 1および係数計算手段 4 0 2に加えて基底データ選択手段 4 0 3を備えている点で、 図 1の第 1の実施の形態にかかるデータ圧縮装置と相違 する。
基底データ選択手段 4 0 3は、 対応点決定手段 4 0 1が生成した合成対象 3次 元データ 4 0 4の合成に適した複数の基底 3次元データを基底 3次元データ群 4 1 2から選択し、 係数計算手段 4 0 2に伝達する。 係数計算手段 4◦ 2は、 基底 データ選択手段 4 0 3により選択された複数の基底 3次元データを結合して合成 対象 3次元データ 4 0 4を合成するための結合係数を計算し、 この計算した結合 係数と合成に使用した複数の基底 3次元データを特定する基底選択データとを圧 縮データ 4 3 0として出力する。
入力 3次元データ 4 2 0、 参照 3次 ¾データ 4 1 1および基底 3次元データ群 4 1 2の各データは、 図 1の入力 3次元データ 1 2 0、 参照 3次元データ 1 1 1 および基底 3次元デ一タ群 1 1 2と同じであり、 対応点決定手段 4 0 1および係 数計算手段 4 0 2は図 1の対応点決定手段 1 0 1および係数計算手段 1 0 2と機 能的にほぼ同じである。
図 8は本実施の形態のデータ圧縮装置の処理の流れを示す。 まず、 図 7に示さ れた圧縮装置 4 0 0の対応点決定手段 4 0 1は、 3次元データ 4 2 0を入力する と共に記憶装置 4 1 ◦から参照 3次元データ 4 1 1を読み出し、 参照 3次元デ一 タ 4 1 1の頂点に 3次元データ 4 2 0の頂点を対応付けた合成対象 3次元データ 4 0 4を作成する (ステップ S 4 0 1〜S 4 0 3 )。 ここまでは、 図 1の実施の形 態のデータ圧縮装置と同じ動作である。
次に、 基底データ選択手段 4 0 3は、 記憶装置 4 1 0から基底 3次元データ群 4 1 2を読み出し、 その中から合成対象 3次元データ 4 0 4の合成に適した複数 の基底 3次元データを選択する (ステップ S 4 0 4 )。 具体的には、 基底 3次元デ —タ群 4 1 2に含まれる各基底 3次元データ (Sb Tbk) と合成対象 3次元デー タ (St、 Tt) の相関値 (類似度) R kを、 適当な重み wRを用いて、 次式により計 算する。 Rk=(Sbk-St)/(|Sbk| |St|)+wR{(Tbk-Tt)/(|Tbk| |Tt|)} ■·■ ( 1 3)
ただし、 「つ はベク トルの内積を表す。
そして基底データ選択手段 4 0 3は、相関値 Rkが大きい基底 3次元データを選 択する。選択方法の一例としては、相関値 Rkの大きい順に予め定められた数の基 底 3次元データを選択する方法や、相関値 Rkが予め定められた閾値より大きい基 底 3次元データを全て選択する方法など、 様々な方法を用いることができる。 こ こでは一例として、相関値 Rkの値の大きい順に、 上位 5 0個の基底 3次元データ を基底 3次元データ群 4 1 2から選択するものとする。 選択された 5 0個の基底 3次元データを、 それに付与された番号の小さい順に、 1 , 2, ···, 5 0番目の 基底 3次元データとし、 3次元形状とテクスチャをそれぞれベク トル {Sb Tbk} で奉す。 さらに、 基底 3次元データ群 4, 1 2の中からどのデータを選択したかを 表す基底選択データを生成する。 一例として、 基底 3次元データ群 4 1 2として 1 0 0個の基底 3次元データがある場合には、 1 0 0ビットのデータでどの基底 3次元データを選択したかを表すことができる。
ここで用いた相関値 (類似度) と基底 3次元データの選択方法はあくまで一例 であり、 このほかにも様々な方法が利用可能である。 他の方法の一例としては、 形状とテクスチャについて独立に相関値を計算し、 それぞれについて相関値の高 い 5 0個のデータを基底 3次元データとして選択する方法もある。 この場合、 形 状とテクスチャで異なる基底 3次元データが選択される場合があるので、 基底 3 次元データ群 4 1 2の中からどの基底 3次元データを選択したかを表す基底選択 データは、形状とテクスチャとで 2組になり、合計 2 0 0ビッ卜のデータになる。 次に、 係数計算手段 4 0 2は、 基底データ選択手段 4 0 3で選択された基底 3 次元データ群を用いて合成対象 3次元データ 4 0 4を合成するための結合係数 {asl, '■·, cts50, . atl, …, at50}を、 式 (8)、 (9) によって計算する (ス テツプ S 4 0 5 )。
次に、 係数計算手段 4 0 2は、 計算した係数データと合成に使用した基底 3次 元データ群を特定するリストである基底選択データとを圧縮データ 4 3 0として 出力する (ステップ S 4 0 6)。 次に、 本実施の形態のデータ圧縮装置の効果を説明する。
本実施の形態のデータ圧縮装置では、 入力された 3次元データ 4 2 0に対して、 最適な基底 3次元データを選択してデータ圧縮を行うように構成されているので、 使用する基底 3次元データ数を少なくすることができる。 特に、 ここで説明に用 いた例では、 基底データ選択手段 4 0 3によって基底 3次元データ数が 5 0個に 削減されているので、 1 0 0個の基底 3次元データを用いる場合に比べ係数のデ ータ量が 1ノ 2に削減される。 また、 係数計算の計算量もその分だけ減少し、 高 速な処理が可能となる。 ここで説明に用いた例では、 式 (8 )、 ( 9 ) によって計 算する結合係数の数が 1 2に削減されるため、 計算時間が約半分に短縮される。 さらに、 同じ数の基底 3次元データを使用する場合も、 復元される 3次元データ の精度を高くすることができる。 すなわち、 予め 5 0個だけの基底 3次元データ を用意して常にその 5 0個を使う場合に比べ、 1 0 0個のデータを用意して本実 施形態のよ'うに選択的に 5 0個を用いることにより、 式 (1 0 )、 ( 1 1 ) によつ て復元される 3次元データと入力 3次元データ 4 2 0の誤差を小さくすることが できる。
『データ復元装置の第 2の実施の形態』
次に、 図 5に示した第 2の実施の形態のデータ圧縮装置および図 7に示した第 3の実施の形態のデータ圧縮装置により生成された圧縮データから元の 3次元デ ータを復元するデータ復元装置の構成例について説明する。
図 9を参照すると、 データ復元装置の第 2の実施の形態は、 物体の形状を表す 3次元データの圧縮データ, 5 2 0を入力して元の 3次元データ 5 3 0を出力する 復元装置 5 0 0と、 それに接続された記憶装置 5 1 0とで構成される。
記憶装置 5 1 0には、 データ圧縮側の図 5の基底 3次元データ群 3 1 2或いは 図 7の基底 3次元データ群 4 1 2と全く同一の基底 3次元データ群 5 1 1が予め 記憶されている。
復元装置 5 0 0は、 データ圧縮側の図 5の圧縮データ 3 3 0或いは図 7の圧縮 データ 4 3 0に相当する圧縮データ 5 2 0を入力し、 この圧縮データ 5 2 0に含 まれる基底選択データに基づいて記憶装置 5 1 0から圧縮側で合成に使用された 基底 3次元データ群を読み出す基底データ読出手段 5 0 1と、 この読み出された 基底 3次元データ群を圧縮データ 5 2 0に含まれる結合係数により結合した 3次 元データ 5 3 0を出力する 3次元データ復元手段 5 0 2とを備えている。
図 1 0は本実施の形態のデータ復元装置の処理の流れを示す。 図 9に示された 復元装置 5 0 0の基底データ読出手段 5 0 1は、圧縮データ 5 2 0を受けると (ス テツプ S 5 0 1 )、 圧縮データ 5 2 0に含まれる基底選択データに基づいて記憶装 置 5 1 0の基底 3次元データ群 5 1 1の中から圧縮側で合成に使用された基底 3 次元データ群を読み出す (ステップ S 5 0 2 )。
次に、 3次元データ復元手段 5 0 2は、 基底データ読出手段 5 0 1により読み 出された基底 3次元データ群を、 前記の式 (1 0 )、 ( 1 1 ) によって、 圧縮デー タ 5 2 0に含まれる結合 、数に従って結合して 3次元データを復元し、 出力する (ステップ S 5 0 3、 S 5 0 4 )。
『データ圧縮装置の第 4の実施の形態』 .
図 1 1を参照すると、 データ圧縮装置の第 4の実施の形態は、 圧縮装置 6 0 0 が、 対応点決定手段 6 0 1および係数計算手段 6 0 3に加えて領域分割手段 6 0 2を備え、 記憶装置 6 1 0が参照 3次元データ 6 1 1および基底 3次元データ群 6 1 3に加えて部分領域決定データ 6 1 2を備えている点で、 図 1の第 1の実施 の形態にかかるデ一タ圧縮装置と相違する。
部分領域決定データ 6 1 2は、 入力 3次元.データ 6 2 0から対応点決定手段 6 0 1で作成された合成対象 3次元データ 6 0 4および合成に使用する基底 3次元 データ群 6 1 3をどのような部分領域に分割するかを定義している。 具体的には、 前記式(4 )および式(5 ) で示される合成対象 3次元データならびに前記式(6 ) および式 (7 ) で示される規定 3次元データの各頂点がどの部分領域に属するか を記述したテーブルで構成される。 幾つの部分領域に分割するか、 各部分領域を どの程度の大きさとするかは任意である。
領域分割手段 6 0 2は、 部分領域決定データ 6 1 2を参照して、 合成対象 3次 元データ 6 0 4および基底 3次元データ群 6 1 3中の個々の基底 3次元データを 同じ部分領域に分割し、 合成対象 3次元データ 6 0 4の各部分領域を係数計算手 段 6 0 3へ出力し、 基底 3次元データ群 6 1 3の各分割領域は記憶装置 6 1 0に 記憶する。 なお、 基底 3次元データ群 6 1 3が部分領域決定データ 6 1 2に基づ いて既に部分領域に分割されている場合には、 その分割処理は省略してよい。 係数計算手段 6 0 3は、 同じ部分領域に分割された基底 3次元データ群 6 1 3 を結合して合成対象 3次元データ 6 0 4を合成するための結合係数を部分領域ご とに計算し、 この計算した部分領域ごとの結合係数を 3次元データ 6 2 0の圧縮 データ 6 3 0として出力する。 このとき、 圧縮データ 6 3 0に、 部分領域決定デ ータ 6 1 2を含めるようにしてもよレ、。
図 1 2は本実施の形態のデータ圧縮装置の処理の流れを示す。 まず、 図 1 1に 示された圧縮装置 6 0 0の対応点決定手段 6 0 1は、 3次元データ 6 2 0を入力 すると共に、 記憶装置 6 1 0から参照 3次元データ 6 1 1を読み出し、 参照 3次 元データ 6 1 1の頂点に 3次元データ 6 2 0の頂点を対応付けた合成対象 3次元 データ 6 0 4を作成する (ステップ S 6 0 1〜S 6 0 3 )。 ここまでは、 図 1の実 施の形態のデータ圧縮装置と'同じ動作である。
次に、 領域分割手段 6 0 2は、 記憶装置 6 1 0から部分領域決定データ 6 1 2 および基底 3次元データ群 6 1 3を読み出し (ステップ S 6 0 4 )、 その部分領域 決定データ 6 1 2に従って、 合成対象 3次元データ 6 0 4および基底 3次元デー タ群 6 1 3を複数の部分領域に分割する (ステップ S 6 0 5 )。 合成対象 3次元デ ータ 6 0 4の p ( p = l、 · · ·、 m. mは部分領域の総数) とすると、 p番目の部 分領域は、 前記式 (4 ) および式 (5 ) から p番目の部分領域に属する頂点のデ ータを取り出して配列したベク トル Stp、 Ttpで定義され、 k番目の基底 3次元デ ータの p番目の部分領域は、 前記式 (6 ) および式 (7 ) から p番目の部分領域 に属する頂点のデータを取り出して配列したべク トル Sbkp、 Tbkpで定義される。 次に、 係数計算手段 6 0 3は、 各部分領域ごとに、 基底 3次元データ群 6 1 3 の部分領域を用いて合成対象 3次元データ 6 0 4の部分領域を合成するための結 合係数 { a skp}、 { a tkp}を前記式(8 )、式(9 ) と同様の式によって計算する (ス テツプ S 6 0 6 )。
次に、 係数計算手段 6 0 3は、 各部分領域ごとの結合係数と部分領域決定デー タ 6 1 2とを圧縮データ 6 3 0として出力する (ステップ S 6 0 7 )。
次に本実施の形態のデータ圧縮装置の効果を説明する。
本実施の形態のデータ圧縮装置では、 入力 3次元データ 6 2 0から導出した合 成対象 3次元データ 6 0 4と基底 3次元データ群 6 1 3とを同じ複数の部分領域 に分割し、 分割領域毎に、 基底 3次元データ群を結合して合成対象 3次元データ を合成するための結合係数を求めているため、 領域分割しない場合に比べて復元 精度の良い圧縮データを得ることができる。 その理由は、 各部分領域ごとに前記 式 (8 )、 式 (9 ) によって最適な結合係数が計算されるからである。
『データ圧縮装置の第 5の実施の形態』
図 1 3を参照すると、 データ圧縮装置の第 5の実施の形態は、 圧縮装置 7 0 0 が、 対応点決定手段 7 0 1、 領域分割手段 7 0 2および係数計算手段 7 0 3に加 えて圧縮判定手段 7 0 4を備えている点で、 図 1 1の第 4の実施の形態にかかる データ圧縮装置と相違する。
圧縮判定手段 7 0 4は、 係数計算手段 7 0 3で計算された各部分領域ごとの結 合係数および基底 3次元データ群 7 1 3の各部分領域から 3次元データを復元し、 この復元した 3次元データと合成対象 3次元データ 7 0 5とを比較し、 復元精度 が予め定められた精度に満たない場合には、 合成対象 3次元データ 7 0 5をさら に細かい部分領域に分割して部分領域ごとに結合係数を求める制御を行う。
入力 3次元データ 7 2 0.、 参照 3次元データ 7 1 1および基底 3次元データ群 7 1 3の各データは、 図 1 1の入力 3次元データ 6 2 0、 参照 3次元データ 6 1 1および基底 3次元データ群 6 1 3と同じであり、 対応点決定手段 7 0 1、 領域 分割手段 7 0 2および係数計算手段 7 0 3は図 1 1の対応点決定手段 6 0 1、 領 域分割手段 6 0 2および係数計算手段 6 0 3と機能的に同じである。
部分領域決定データ 7 1 2は、 入力 3次元データ 7 2 0から対応点決定手段 7 0 1で作成された合成対象 3次元データ 7 0 5および合成に使用する基底 3次元 データ群 71 3をどのような部分領域に分割するかを記述した分割定義を複数含 んでいる。 具体的には、 各分割定義は、 前記式 (4) および式 (5) で示される 合成対象 3次元データならびに前記式 (6) および式 (7) で示される規定 3次 元データの各頂点がどの部分領域に属するかを記述したテーブルを有する。 各々 の分割定義において、 幾つの部分領域に分割するか、.各部分領域をどの程度の大 きさとするかは任意である。 分割数が 1の分割定義は、 実質的に分割を行わない ことを示す。
図 14は本実施の形態のデータ圧縮装置の処理の流れを示す。 まず、 圧縮装置 700の対応点決定手段 701は、 3次元データ 720を入力すると共に記憶装 置 7 10から参照 3次元データ 71 1を読み出し、 参照 3次元データ 7 1 1の頂 点に入力 3次元データ 720の頂点を ¾;応付けた合成対象 3次元データ 705を 作成する (ステップ S 701〜S 703)。
次に、 領域分割手段 702は、 記憶装置 7 10から 1番最初に使用する部分領 域決定データ 7 1 2および基底 3次元データ群 7 1 3を読み出し (ステップ S 7 04)、 その部分領域決定データ 71 2に従って、 合成対象 3次元データ 705お よび基底 3次元データ群 71 3を複数の部分領域に分割する (ステップ S 705)。 合成対象 3次元データ 705の p (p = l、 ·'·、 m. mは部分領域の総数) 番目 の部分領域は、 前記式 (4) および式 (5) から p番目の部分領域に属する頂点 のデータを取り出して配列したベク トル Stp、 Ttpで定義され、 k番目の基底 3次 元データの p番目の部分領域は、 前記式 (6) および式 (7) から p番目の部分 領域に属する頂点のデータを取り出して配列したベタ トル Sbkp、 Tbkpで定義され る。
次に、 係数計算手段 703は、 各部分領域ごとに、 基底 3次元データ群 7 1 3 の部分領域を用いて合成対象 3次元データ Ί 05の部分領域を合成するための結 合係数 {askp}、 {atkp}を前記式(8)、式(9) と同様の式によって計算する (ス テツプ S 706)。
次に、 圧縮判定手段 704は、 係数計算手段 703で計算された各部分領域ご とに計算された結合係数 {askp}、 {atkp}と、 合成に使用された基底 3次元デー タ群の部分領域のべク トル Sbkp、 Tbkpとを用いて、 前述した式 (10)、 (1 1) と同様の式によって 3次元データの各部分領域を復元し、 この復元した各部分領 域の 3次元データ (Stp' と Ttp') と合成対象 3次元データの各部分領域の 3次 元データ (Stpと Ttp) との誤差を計算する (ステップ S 707)。 誤差の尺度と しては様々な基準が考えられるが、 その一例として、 次式で示されるような、 対 応する頂点の間の 3次元座標の距離と輝度の誤差の重み付き 2乗和の値 Eを誤差 として用いることができる。
E= ( I Stp- Stp' [ 2 + we I Ttp— Ttp' ) M ■·· (1 2 ') ここで、 Mは分割領域に含まれる頂点の数である。 部分領域の数が 2以上の場 合、各部分領域ごとに式( 1 2 ')で計算された値の合計値を最終的な誤差とする。, 重み係数 weには様々な値を用いることができるが、 一例として 1. 0とする。 テクスチャの再現精度を^くするように本発明を用いたい場合は、 より大きい値 を用いれば良い。
次に圧縮判定手段 704は、 誤差 Eの値が予め定められた閾値より小さいかど うかを判定する。 誤差が大きすぎる場合には (ステップ S 708で NO)、 領域分 割手段 705に制御を戻す。 領域分割手段 705は、 部分領域をさらに細かく分 割する部分領域決定データ 71 2を記憶装置 7 1 0から読み出し (ステップ S 7 09)、 ステップ S 705以降の処理を繰り返す。 これにより、 より細かな部分領 域ごとの結合係数が求められるので、 前回と同様に所望の復元精度が得られてい るかどうかの判定を行う。 より細かな部分領域への分割と結合係数の再計算は、 満足する誤差が得られるか、 それ以上細分害 ijする部分領域決定データがなくなる まで続けられる。
他方、 ステップ S 708において、 誤差 Eが予め定められた閾値より大きくな い場合、 圧縮判定手段 704は、 係数計算手段 302で計算された各部分領域ご との結合係数と部分領域決定データ 7 1 2とを圧縮データ 730として出力する (ステップ S 71 0)。
領域分割手段 702による部分領域への分割方法としては、 前述したように多 段階の細かい部分領域分割法を部分領域決定データ 7 1 2で予め定めておく方法 がある。 その一例として人の顔の場合を説明する。 まず、 第 1の部分領域分割法 としては、 全体を一つの部分領域とする (すなわち分割しない)。 第 2の部分領域 分割法としては、 図 1 5に示すように顔の上部と下部の 2つの領域に分割する。 第 3の部分領域分割法としては、 図 1 6に示すように 4領域に分割する。 さらに 第 4の部分領域分割法としては図 1 7に示すように 8領域に分割する。 このよう に予め多段階の部分領域分割法を部分領域決定データ 7 1 2で定義しておき、 ま ず、 第 1の部分領域分割法を用いて分割した部分領域についてその結合係数を算 出して誤差 Eを計算する。 この値が予め定めた閾値より大きい場合には、 第 2の 部分領域分割法を適用して分割した部分領域についてその結合係数を算出して誤 差 Eを計算する。 それでも誤差 Eの値が予め定めた閾値より大きい場合には、 第 3の部分領域、 第 4の部分領域、 というように領域^細かく分割して、 Eの値が 閾値以下になるか、 あらかじめ用意した最大の分割領域数になるまで処理を繰り 返す。 '
さらに別の分割方法として、 部分領域毎に計算される Eの値の大きい領域を細 かぐ分割していき、 あらかじめ定めた閾値より Eの値が小さくなったら分割をや めるという方法も採用できる。 その一例としては、 まず、 領域分割を行わない状 態を初期状態として、 圧縮と復元を行い、 誤差 Eを計算する。 次に、 Eの値が閾 値を超えている場合は、 頂点の X座標に基づいて、 平均値より大きい領域と小さ い領域に分割する。 ここで X座標値に基づいて分割するのはあくまで一例であり、 様々な方法が利用可能である。 分割された 2つの領域について、 再度、 圧縮、 復 元、 誤差 Eの計算を部分領域毎に行う。 それぞれの領域について Eを計算し、 も し何れかの部分領域で誤差 Eの値が閾値を超えていたら、 その領域をさらに分割 する。 一例として、 y座標がその領域の全頂点の y座標の平均値より大きいかど うかでさらに 2つに分割し、 全体で 3つの部分領域とする。 誤差 Eの値が閾値を 超えていなかった領域はこれで処理終了とし、 新たに分割された 2領域について、 再度、 圧縮、 復元、 誤差 Eの計算を行い、 閾値を超える場合にはさらに X座標あ るいは z座標の値で分割を行う。 全ての部分領域で誤差 Eの値が閾値を下回る力 あらかじめ決めた分割回数に達するまで、 処理を繰り返し行う。 このような方法 で、 復元誤差 Eが大きい領 を細かく分割していくことで、 より誤差の少ない圧 縮を効率的に行うことができる。
次に、 本実施の形態のデータ圧縮装置の効果について説明する。
本実施の形態のデータ圧縮装置では、 復元精度が予め定められた精度に満たな い場合には、 合成対象 3次元データをさらに細かい部分領域に分割して結合係数 を求める計算を繰り返すため、 復元精度を或る値以下に保証することができる。
『データ復元装置の第 3の実施の形態』
次に、 図 1 1に示した第 4の実施の形態のデータ圧縮装置および図 1 3に示し た第 5の実施の形態のデータ圧縮装置によ,り生成された圧縮データから元の 3次 元データを復元するデ一タ復元装置の構成例について説明する。
図 1 8を参照すると、 データ復元装置の第.3の実施の形態は、 物体の形状を表 す 3次元データの圧縮データ. 8 2 0を入力して元の 3次元データ 8 3 0を出力す る復元装置 8 0 0と、 それに接続された記憶装置 8 1 0とで構成される。
記憶装置 8 1 0には、 データ圧縮側の図 1 1の基底 3次元データ群 6 1 2或い は図 1 3の基底 3次元データ群 7 1 3と全く同一の基底 3次元データ群 8 1 1が 予め記憶されている。
復元装置 8 0 0は、 データ圧縮側の図 1 1の圧縮データ 6 3 0或いは図 1 3の 圧縮データ 7 3 0に相当する圧縮データ 8 2 0を入力し、 この圧縮データ 8 2 0 に含まれる部分領域決定データに基づいて、 圧縮側の合成に使用された基底 3次 元データ群の部分領域を基底 3次元データ群 8 1 1.から抽出する基底データ読出 手段 8 0 1と、 この抽出された基底 3次元データ群の部分領域を圧縮データ 8 2 0に含まれる部分領域ごとの結合係数により同じ部分領域ごとに結合して 3次元 データ 8 3 0を復元する 3次元データ復元手段 8 0 2とを備えている。
図 1 .9は本実施の形態のデータ復元装置の処理の流れを示す。 復元 置 8 0 0 の基底データ読出手段 8 0 1は、 圧縮データ 8 2 0を入力すると (ステップ S 8 0 1 )、 圧縮データ 8 2 0に含まれる部分領域決定データに従って、 基底 3次元デ ータ群 8 1 1の各基底 3次元データを複数の部分領域に分割し、 圧縮データ 8 2 0に含まれる各部分領域ごとの結合係数と共に 3次元データ復元手段 8 0 2へ出 力する (ステップ S 8 0 2 )。 なお、 部分決定データに従って分割ざれた基底 3次 元データ群が既に記憶装置 8 1 0に記憶されている場合には、 それらを記憶装置 8 1 0から読み出すだけでよい。
次に、 3次元データ復元手段 8 0 2は、 基底データ読出手段 8 0 1により抽出 された基底 3次元データ群を各部分領域ごとの結合係数により同じ部分領域ごと に結合して 3次元データを復元し、 出力する (ステップ S 8 0 3、 S 8 0 4 )。 な お、 結合した部分領域どうしの境界部分に対して、 平滑化処理を行うようにして ちょい。
『圧縮復元システムの実施の形態』 、
図 2 0を参照すると、 本発明にかかる圧縮.復元システムの一例は、 圧縮復元装 置 9 0 0とそれに接続された記憶装置 9 1 0および 9 2 0とで構成される。
圧縮復元装置 9 0 0は、 圧縮装置 9 0 1および復元装置 9 0 2を備えている。 記憶装置 9 1 0は、 参照 3次元データ 9 1 1および基底 3次元データ群 9 1 2を 記憶し、 記憶装置 9 2 0は圧縮データ 9 2 1を記憶する。
圧縮装置 9 0 1は、 物体の形状を表す 3次元データ 9 3 0を入力し、 記憶装置. 9 1 Qに記憶された参照 3次元データ 9 1 1および基底 3次元データ群 9 1 2を 使用して、 3次元データ 9 3 0の圧縮処理を行い、 その結果の圧縮データ 9 2 1 を記憶装置 9 2 0に記憶する。
復元装置 9 0 2は、 記憶装置 9 2 0から圧縮データ 9 2 1を読み出し、 記憶装 置 9 1 0に記憶された基底 3次元データ群 9 1 2を使用して、 圧縮データ 9 2 1 の復元処理を行い、 その結果の 3次元データ 9 4◦を出力する。
圧縮装置 9 0 1は、 図 1に示した圧縮装置 1 0 0を使用することができる。 こ の場合、 入力 3次元データ 9 3 0は入力 3次元データ 1 2 0に、 参照 3次元デ一 タ 9 1 1は参照 3次元データ 1 1 1に、 基底 3次元データ群 9 1 2は基底 3次元 データ群 1 1 2に、 圧縮データ 9 2 1は圧縮データ 1 3 0にそれぞれ対応する。 またこのとき、 復元装置 9 0 2は図 3に示した復元装置 2 0 0を使用することが できる。 このときの本実施の形態の圧縮復元システムの動作は、 図 2のステップ S 1 0 6における出力先が記憶装置 9 2 0になること、 図 4のステップ S 2 0 1 における入力元が記憶装置 9 2 0になることが相違するだけで、 その他の動作は 同じである。
また圧縮装置 9 0 1は、 図 5に示した圧縮装置 3. 0 0を使用することもできる。 この場合、 入力 3次元データ 9 3 0は入力 3次元データ 3 2 0に、 参照 3次元デ —タ 9 1 1は参照 3次元データ 3 1 1に、 基底 3次元データ群 9 1 2は基底 3次 元データ群 3 1 2に、 圧縮データ 9 2 1は圧縮データ 3 3 0にそれぞれ対応する。 またこのとき、 復元装置 9 0 2は図 9に示した復元装置 5 0 0を使用することが できる。 このときの本実施の形態の圧縮復元システムの動作は、 図 6のステップ S 3, 0 9における出力先が記憶装置 9 2, 0になるこ^:、 図 1 0のステップ S 5 0 1における入力元が記憶装置 9 2 0になることが相違するだけで、 その他の動作 は同じである。
また圧縮装置 9 0 1は、 図 7に示した圧縮装置 4 0 0を使用することもできる。 この場合、 入力 3次元データ 9 3 0は入力 3次元データ 4 2 0に、 参照 3次元デ ータ 9 1 1は参照 3次元データ 4 1 1に、 基底 3次元データ群 9 1 2は基底 3次 元データ群 4 1 2に、 圧縮データ 9 2 1は圧縮データ 4 3 0にそれぞれ対応する。 またこのとき、 復元装置 9 0 2は図 9に示した復元装置 5 0 0を使用することが できる。 このときの本実施の形態の圧縮復元システムの動作は、 図 8のステップ S 4 0 6における出力先が記憶装置 9 2 0になること、 図 1 0のステップ S 5 0 1における入力元が記憶装置 9 2 0になることが相違するだけで、 その他の動作 は同じである。
また圧縮装置 9 0 1は、 図 1 1に示した圧縮装置 6 0 0を使用することもでき る。 この場合、 入力 3次元データ 9 3 0は入力 3次元データ 6 2 0に、 参照 3次 元データ 9 1 1は参照 3次元データ 6 1 1に、 基底 3次元データ群 9 1 2は基底 3次元データ群 6 1 3に、 圧縮データ 9 2 1は圧縮データ 6 3 0にそれぞれ対応 し、 部分領域決定データ 6 1 2と同じデータが記憶装置 9 1 0に記憶される。 ま たこのとき、 復元装置 9 0 2は図 1 8に示した復元装置 8 0 0を使用することが できる。 このときの本実施の形態の圧縮復元システムの動作は、 図 1 2のステツ プ S 6 0 7における出力先が記憶装置 9 2 0になること、 図 9のステップ S 8 0 1における入力元が記憶装置 9 2 0になることが相違 1"るだけで、 その他の動作 は同じである。
また圧縮装置 9 0 1は、 図 1 3に示した圧縮装置 7 0 0を使用することもでき る。 この場合、 入力 3次元データ 9 3 0は入力 3次元データ 7 2 0に、 参照 3次 元データ 9 1 1は参照 3次元データ 7 1 1に、 基底 3次元データ群 9 1 2は基底 3次元データ群 7 1 3に、 圧縮データ 9 2 1は圧縮データ 7 3 0にそれぞれ対応 し、 部分領域決定データ Ί 1 2と同じデータが記憶装置 9 1 0に記憶される。 ま たこのとき、 復元装置 9 0 2は図 1 8に示した復元装置 8 0ひを使用することが できる。 このときの本実施の形態の圧縮復元システムの動作は、 図 1 4のステツ プ S 7 1 0における出力先が記憶装置 9 2 0.になること、 図 9のステップ S 8 0 1における入力元が記憶装置 9 2 0になることが相違するだけで、 その他の動作 は同じである。
圧縮データ 9 2 1を記憶する記憶装置 9 2 0は、 任意の記憶装置で実現するこ とが可能であるが、 一例として、 圧縮復元装置 9 0 0に対して着脱自在な可搬型 の読み書き可能な記憶装置で実現することができる。
次に本実施の形態の圧縮復元システムの効果を説明する。
本実施の形態では、 入力 3 元データ 9 3 0の代わりに、 基底 3次元データ群 9 1 2を用いて 3次元データを復元するための結合係数を含む圧縮データ 9 2 1 を記憶するように構成されており、 圧縮データ 9 2 1は 3次元データ 9 3 0に比 ベてはるがにデータ量が小さいため、 3次元データの記憶に必要な容量を大幅に 削減することができる。
また本実施の形態では、 記憶した 3次元データが必要になった場合、 圧縮デー タ 9 2 1から元の 3次元データを高い精度で復元することができる。
さらに記憶装置 9 2 0として、 可搬型の記憶装置を使用すれば、 圧縮データ 9 2 1を自由に持ち運ぶことができ、 その記憶装置 9 2 0を同様の構成を持つ別の 圧縮復元システムに装着して元の 3次元データを別の場所で復元するといった利 用形態も実現することができる。 このとき、 高い圧縮率が実現されているので、 少ない記憶容量の小型の記憶装置 9 2 0でも数多くの 3次元データの記憶が可能 である。 また、 .記憶装置 9 2 0には結合係数は記憶されているが、 基底 3次元デ 一タ群は記憶されていないので、 記憶装置 9 2 0が盗難にあつたとしても元の 3 次元データを復元することができない。 これにより、 データの秘匿性が確保でき る。
『データ伝送システムの実施の形態』
図 2 1を参照すると、 本発明にかかるデータ伝送システムの一例は、 データ送 信装置 1 0 0 0とデータ受信装置 1 1 0 0とが通信路 1 3 0 0を通じて接続され てい.る。 データ送信装置 1 0 0 0は、 物体の形状を表す 3次元データ 1 0 1 0を 入力し、 それを圧縮した圧縮データを含む伝送データ 1 2 0 0を通信路 1 3 0 0 を通じてデータ受信装置 1 1, 0 0 へ送信する機能を有し、 データ受信装置 1 1 0 0は、 伝送データ 1 2 0 0を受信し、 それに含まれる圧縮データから 3次元デー タ 1 1 1 0を復元して出力する機能を有する。
データ伝送装置 1 0 0 0は、 圧縮装置 1 0 2 0と記憶装置 1 0 3 0と伝送装置 1 0 4 0とを備える。 記憶装置 1 0 3 0には、 参照 3次元データ 1 0 3 1と基底 3次元データ群 1 0 3 2とが記憶される。 圧縮装置 1 0 2◦は、 3次元データ 1 0 1 0を入力し、 記憶装置 1 0 3 0に記憶された参照 3次元データ 1 0 3 1およ び基底 3次元データ群 1 0 3 2を使用して、 3次元データ 1 0 1 0の圧縮処理を 行い、 .その結果の圧縮データをデータ伝送手段 1 0 4 1に出力する。 伝送装置 1 0 4 0は、 庄縮装置 1 0 2 0から出力されるデータを指定された通信相手へ送信 するデータ伝送手段 1 0 4 1を有する。
データ受信装置 1 1 0 0は、 復元装置 1 1 2 0と記憶装置 1 1 3 0と伝送装置 1 1 4 .0とを備える。 記憶装置 1 1 3 0には、 基底 3次元データ群 1 1 3 1が記 憶される。 伝送装置 1 1 4 0は、.通信路 1 3 0 0から伝送データ 1 2 0 0を受信 し、 復元装置 1 1 2 0に入力するデータ伝送手段 1 1 4 1を有する。 復元装置 1 1 2 0は、 データ伝送手段 1 1 4 1から入力した伝送データ 1 2 0 0に含まれる 圧縮データの復元処理を記憶装置 1 1 3 0に記憶された基底 3次元データ群 1 1 3 1を使用して行い、 その結果の 3次元データ 1 1 1 0を出力する。
データ送信装置 1 0 0 0の圧縮装置 1 0 2 0は、 図 1に示した圧縮装置 1 0 0 を使用することができる。 この場合、 入力 3次元データ 1 0 1 0は入力 3次元デ ータ 1 2 0に、 参照 3次元データ 1 0 3 1は参照 3次元データ 1 1 1に、 基底 3 次元データ群 1 0 3 2は基底 3次元データ群 1 1 2に、 データ伝送手段 1 0 4 1 に出力される圧縮データは圧縮データ 1 3 0にそれぞれ対応する。 またこのとき、 データ受信装置 1 1 0 0の復元装置 1 1 2 0は図 3に示した復元装置 2 0 0を使 用することができる。 このときの本実施の形態のデータ伝送システムの動作は、 図 2のステップ S 1 0 6における出力先がデータ伝送手段 1 0 4 1になること、' データ伝送手段 1 0 4 1からデータ伝送手段 1 1 4 .1へ伝送データ 1 2 0 0を送 信する処理が介在すること、 図 4のステップ S 2 0 1における入力元がデータ伝 送手段 1 1''4 1になることが相違するだけで、 その他の動作は同じである。
またデータ送信装置 1 0 0 0の圧縮装置 1 0 2 0は、 図 5に示した圧縮装置 3 0 0を使用することもできる。 この場合、 入力 3次元データ 1 0 1 0は入力 3次 元データ 3 2 0に、 参照 3次元データ 1 0 3 1は参照 3次元データ 3 1 1に、 基 底 3次元データ群 1 0 3 2は基底 3次元データ群 3 1. 2に、 データ伝送手段 1 0 4 1に出力される圧縮データは圧縮データ 3 3 0にそれぞれ対応する。 またこの とき、 データ受信装置 1 1 0 0の復元装置 1 1 2 0は図 9に示した復元装置 5 0 0を使用することができる。 このときの本実施の形態の圧縮復元システムの動作 は、 図 6のステップ S 3 0 9における出力先がデ タ伝送手段 1 0 .4 1になるこ と、 データ伝送手段 1 0 4 1からデータ伝送手段 1 1 4 1へ伝送データ 1 2 0 0 を送信する処理が介在すること、 図 1 0のステップ S 5 0 1における入力元がデ ータ伝送手段 1 1 4 1になること、 圧縮装置 1 0 2 0内の圧縮判定手段 3 0 3が 基底 3.次元データ群 1 0 3 2に新たな基底 3次元データを追加した際に、 その追 加した基底 3次元データをデータ伝送手段 1 0 4 1により通信路 1 3 0 0を通じ てデータ伝送手段 1 1 4 1に送り、 データ伝送手段 1 1 .4 1が基底 3次元データ 群 1 1 3 1に追加することにより、 データ送信装置 1 0 0 0とデータ受信装置 1 1 0 0との間で基底 3次元データ群 1 0 3 2および 1 1 3 1の一致処理を行うこ とが相違するだけで、 その他の動作は同じである。
またデータ送信装置 1 0 0 0の圧縮装置 1 0 2 0は、 図 7に示した圧縮装置 4 0 0を使用することもできる。 この場合、 入力 3次元データ 1 0 1 0は入力 3次 元データ 4 2 0に、 参照 3次元データ 1 0 3 1は参照 3次元デ タ 4 1 1に、 基 底 3次元データ群 1 0 3 2は基底 3次元データ群 4 1 2に、 データ伝送手段 1 0 4 1に出力される圧縮データは圧縮データ 4 3 0にそれぞれ対応する。 またこの とき、 データ受信装置 1 1 0 0の復元装置 1 1 2 0は図 9に示した復元装置 5 0 0を使用することができる。 このときの本実施の形態の圧縮復元システムの動作 は、 図 8のステップ S 4 0 6における出力先がデータ伝送手段 1 0 4 1になるこ と、 データ伝送手段 1 0 4 1からデータ伝送手段 1 1 4 1 へ伝送データ 1 2 0 0 を送信する処理が介在すること、 図 1 0のステップ S 5 0 1における入力元がデ ータ伝送手段 1 1 4 1になることが相違するだけで、 その他の動作は同じである。 またデ一タ送信装置 1 0 0 0の圧縮装置 1 0 2 0は、 図 1 1に示した圧縮装置
6 0 0を使用することもできる。 この場合、 入力 3次元データ 1 0 1 0は入力 3 次元データ 6 2 0に、 参照 3次元データ 1 0 3 1は参照 3次元データ 6 1 1に、 基底 3次元データ群 1 0 3 2は基底 3次元データ群 6 .1 3に、 デ^ "タ伝送手段 1 . 0 4 1に出力される圧縮データは圧縮データ 6 3 0にそれぞれ対応し、 部分領域 決定データ 6 1 2と同じデータが記憶装置 1 0 3 0に記憶される。 またこのとき、 データ受信装置 1 1 0 0の復元装置 1 1 2 0は図 1 8に示した復元装置 8 0 0を 使用することができる。 このときの本実施の形態の圧縮復元システムの動作は、 図 1 2のステップ S 6 0 7における出力先がデータ伝送手段 1 0 4 1になること、 データ伝送手段 1 0 4 1からデータ伝送手段 1 1 4 1 へ伝送データ 1 2 0 0を送 信する処理が介在すること、 図 1 9のステップ S 8 0 1における入力元がデータ 伝送手段 1 1 4 1になることが相違するだけで、 その他の動作は同じである。
またデータ送信装置 1 0 0 0の圧縮装置 1 0 2 0は、 図 1 3に示した圧縮装置
7 0 0を使用することもできる。 この場合、 入力 3次元データ 1 0 1 0は入力 3 次元データ 7 2 0に、 参照 3次元データ 1 0 3 1は参照 3次元データ 7 1 1に、 基底 3次元データ群 1 0 3 2は基底 3次元データ群 7 1 3に、 データ伝送手段 1 0 4 1に出力される圧縮データは圧縮データ 7 3 0にそれぞれ対応し、 部分領域 決定データ 7 1 2と同じデータが記憶装置 1 0 3 0に記憶される。 またこのとき、 データ受信装置 1 1 0 0の復元装置 1 1 2 0は図 1 8に示した復元装置 8 0 0を 使用することができる。 このときの本実施の形態の圧縮復元システムの動作は、 図 1 4のステップ S 7 1 0における出力先がデータ伝送手段 1 0 4 1になること、 データ伝送手段 1 0 4 1.からデータ伝送手段.1 1 4 1へ伝送データ 1 2 0 0を送 信する処理が介在すること、 図 1 9のステップ S 8 0 1における入力元がデータ 伝送手段 1 1 4 1になることが相違するだけで、 その他の動作は同じである。
次に本実施の形態の圧縮復元システムの効果を説明する。
本実施の形態では、 入力 3次元データ. 1 0 1 0の代わりに遥かにデータ量が小 さい結合係数を含む圧縮データを伝送するた.め、 通信路 1 3 0 0を含む伝送系の 負荷を大幅に削減できる。
また、 大量の 3次元データを伝送する場合、 受信側に必要な基底 3次元データ 群のみを送信し、 大量の 3次元データについては結合係数を含む圧縮データを伝 送することによって、 全体のデータ伝送容量を削減することができる。 一例とし て、 1万個の 3次元データを伝送する場合において、 そのうち 1 0 0個の 3次元. データを基底 3次元データ群として用いる場合を説明する。 3次元データの頂点 数が 9万点で一つのデータ容量が 8 0 0 K B , 結合係数を含む 1つの圧縮データ の容量が 1 K Bになる場合は、 全てをそのまま伝送した場合は 8 G Bのデータ転 送が必要となる。 これに対して、 本実施の形態によれば、 まず、 適当に選んだ 1 0 0個のデータは、 そのまま伝送して受信側の記憶装置 1 1 3 0に記憶し、 残り の 9 9 0 0個の 3次元データについて、 圧縮を行って転送する。 すると、 転送デ 一タ量は (8 0 0 X I 0 0 + 1 X 9 9 0 0 ) K B =約 9 0 M Bとなり、 全体のデ ータ圧縮率はおよそ 9 0分の 1になる。
さらに、 本実施の形態では、 結合に使用した基底 3次元データ群を伝送しない 力 \ 伝送するにしても圧縮データとは別に伝送することにより、 結合係数を含む 圧縮データが伝送途中で盗聴されても元の 3次元デ一タを復元することができな い。 よって、 データ通信の.秘匿性が確保できる。
以上本発明の実施の形態について説明したが、 本発明は以上の例に限定されず、 その他各種の付加変更が可能である。 例えば、 形状データとテクスチャとを含む 3次元データを対象としたが、 テクスチャが含まれず形状データだけから構成さ れる 3次元データの圧縮、 復元に対しても適用可能である。 また、 圧縮判定手段 3 0 3と基底データ選択手段 4 0 3とを共に備えたデータ圧縮装置、 領域分割手 段 6 0 2と基底データ選択手段 4 0 3とを共に備えたデータ圧縮装置など、 前述 した実施の形態を組み合わせた実施の形態も考えられる。 さらに、 本発明のデー タ圧縮装置、 データ復元装置、 圧縮復元システム、 データ送信装置、 データ受信 装置、 データ伝送システムは、 その有する機能をハ一ドウエア.的に実現すること は勿論、 コンピュータとプログラムとで実現することができる。 プログラムは、 磁気デイスクや半導体メモリ等のコンピュータ可読記録媒体に記録されて提供さ れ、 コンピュータの立ち上げ時などにコンピュータに読み取られ、 そのコンビュ ータの動作を制御することにより、 そのコンピュータを前述した各実施の形態に おける圧縮装置 1 0 0、 復元装置 2 0 0、 圧縮装置 3 0 0、 圧縮装置 4 0 0、 復 元装置 5 0 0、 圧縮装置 6 0 0、 圧縮装置 7 0 0、 復元装置 8 0 0、 圧縮復元装 置 9 0 0、 データ送信装置 1 0 0 0、 データ受信装置 1 1 0 0およびデータ伝送 システムとして機能させる。
また、 本発明の原理は、 入力 3次元データと、 複数の物体に関する基底 3次元 データとの結合係数を計算し、 この結合係数を送受することにより、 高い圧縮率 を実現することにある。 このため、 入力 3次元データの比較すべき頂点が予め定 まっている場合には、 対応点決定手段及び参照 3次元データを不要にすることも 可能である。 産業上の利用可能十生
本発明によれば、 3次元デ一タのデータ量を削減して記憶するといった用途に 適用できる。 特に、 多数の 3次元データを蓄積するシステムにおいて、 データの 解像度 ·精度を低下させずに高い圧縮率を得ることができる。 また、 3次元デー タをネットワークなどにより他の記憶装置へ伝送する際の、 ネットワークの負荷 を低減するといつた用途にも適用可能である。

Claims

1 . 3次元データを入力し、 頂点の対応関係を決める基準となる参照 3次元 データの頂点に前記入力しだ 3次元データの頂点を対応付けた合成対象 3次元デ ータを作成する対応点決定手段と、
3次元データの合成に使用する基底 3次元データ群を結合して前記合成対象 3 青
次元データを合成するための結合係数を計算し、 該計算した結合係数を前記入力 した 3次元データの圧縮データとして出の力する係数計算手段とを備えることを特 徴とするデータ圧縮装置。 囲
2 . 前記係数計算手段で計算された結合係数および前記基底 3次元データ群 から 3次元データを復元し、.該復元した 3次元データと前記合成対象 3次元デー タとを比較し、 復元精度が予め定められた精度に満たない場合には、 新たな基底 3次元データを 3次元データの合成に使用する基底 3次元データ群に追加する圧 縮判定手段を備えることを特徴とする請求項 1記載のデータ圧縮装置。
3 . 前記合成対象 3次元データの合成に適した複数の基底 3次元データを、 3次元データの合成に使用する基底 3次元データ群から選択する基底デ一タ選択 手段を備えることを特徴とする請求項 1または 2記載のデータ圧縮装置。
4 . 前記圧縮データに、、 前記結合係数に加えて、 結合に使用した基底 3次元 データを特定する選択情報を含ませることを特徴とする請求項 2または 3記載の データ圧縮装置。 '
5 . 前記合成対象 3次元データを複数の部分領域に分割する領域分割手段を 備え、 前記係数計算手段は、 同じ部分領域に分割された基底 3次元データ群を結 合して前記合成対象 3次元データを合成するための結合係数を部分領域ごとに計 算し、 該計算した部分領域ごとの結合係数を前記入力した 3次元データの圧縮デ ータとして出力することを特徴とする請求項 1記載のデータ圧縮装置。
6 . 前記合成対象 3次元データを複数の部分領域に分割する領域分割手段と、 前記係数計算手段で計算ざれた結合係数および前記基底 3次元データ群から 3 次元データを復元し、 該復元した 3次元データと前記合成対象 3次元データとを 比較し、 復元精度が予め定められた精度に満たない場合には、 前記合成対象 3次 元データを前記領域分割手段によって複数の部分領域に分割し、 同じ部分領域に 分割された基底 3次元データ群を結合して前記合成対象 3次元データを合成する ための結合係数を前記係数計算手段によって部分領域ごとに計算し、 該計算した 部分領域ごとの結合係数を前記入力した..3次元データの圧縮データとして出力す る圧縮判定手段とを備えることを特徴とする請求項 1記載のデータ圧縮装置。
7 . 前記圧縮判定手段は、 部分領域に分割して圧縮しても全体の復元精度が 予め定められた精度に満たない場合には、 前記合成対象 3次元データをさらに細 かい部分領域に分割して部分領域ごとに結合係数を求める制御を行うことを特徴 とする請求項 5記載のデータ圧縮装置。
8 . 前記圧縮データに、 前記部分領域を特定する部分領域決定データを含ま せることを特徴とする請求項 5、 6または 7記載のデータ圧縮装置。
9 . 前記圧縮データを記憶する着脱自在な記憶装置を備えることを特徴とす る請求項 1乃至 8の何れか 1項に記載のデータ圧縮装置。
1 0 , 結合係数を含む圧縮データを入力し、 合成に使用された複数の基底 3 次元データを前記圧縮データに含まれる結合係数により結合して 3次元データを 復元する 3次元データ復元手段を備えることを特徴とするデータ復元装置。
1 1 . 合成に使用された基底 3次元データ群の選択情報および結合係数を含 む圧縮データを入力し、 前記選択情報に基づいて圧縮対象 3次元データの合成に 使用された基底 3次元データ群を予め定められた基底 3次元データ群から抽出す る基底データ読出手段と、
該抽出された基底 3次元データ群を前記圧縮データに含まれる結合係数により 結合して 3次元データを復元する 3次元データ復元手段とを備えることを特徴と するデータ復元装置。 .
1 2 . 合成に使用された基底 3次元データ群の部分領域を特定する部分領域 決定データおよび部分領域ごとの結合係数を含む圧縮データを入力し、 前記部分 領域決定データに基づいて圧縮対象 3次元データの合成に使用された基底 3次元 データ群の部分領域を予め定められた基底 3次元データ群から抽出する基底デー タ読出手段と、
該抽出された基底 3次元データ群を前記圧縮データに含まれる部分領域ごとの 結合係数により同じ部分領域ごとに結合して 3次元データを復元する 3次元デー タ復元手段とを備えることを特徴とするデータ復元装置。
1 3 . 前記圧縮データを記憶する着脱自在な記憶装置を備えることを特徴と する請求項 1 0、 1 1または 1 2記載のデータ復元装置。
1 4 . 請求項 1乃至 8の何れか 1項に記載されるデータ圧縮装置および請求 項 1 0、 1 1または 1 2に記載されるデータ復元装置を有する圧縮復元装置と、 該圧縮復元装置で生成された圧縮データを記憶する記憶装置とを備えたことを特 徴とする圧縮復元システム。
1 5 . 請求項 1乃至 8の何れか 1項に記載されるデータ圧縮装置と、 該デー タ圧縮装置が使用する参照 3次元データおよび基底 3 7 元データ群を記憶する記 憶装置と、 前記データ圧縮装置で生成された圧縮データを送信するデータ伝送手 段とを備えたことを特徴とするデータ送信装置。
1 6 . 前記データ伝送手段は、 前記データ圧縮装置が前記基底 3次元データ 群に追加した基底 3次元データを圧縮データの送信先へ伝送することを特徴とす る請求項 1 5記載のデータ送信装置。
1 7 . 請求項 1 0、 . 1 1または 1 2に記載されるデータ復元装置と、 該デー タ復元装置が使用する基底 3次元データ群を記憶する記憶装置と、 圧縮データを 受信し前記データ復元装置へ入力するデータ伝送手段とを備えたことを特徴とす るデータ受信装置。 -
1 8 . 前記データ伝送手段は、 追加の基底 3次元データを受信したとき前記 基底 3次元データ群に追加することを特徴とする請求項 1 7記載のデータ受信装 置。
1 9 . 請求項 1 5または 1 6に記載されるデータ送信装置と請求項 1 7また は 1 8に記載.されるデ一タ受信装置とが通信路を通じて接続されたことを特徴と するデータ伝送システム。
2 0 . a ) 対応点決定手段が、 3次元データを入力し、 頂点の対応関係を決 める基準となる参照 3次元データの頂点に前記入力した 3次元データの頂点を対 応付けた合成対象 3次元デ^"タを作成するステップ、
b ) 係数計算手段が、 3次元データの合成に使用する基底 3次元データ群を結 合して前記合成対象 3次元データを合成するための結合係数を計算し、 該計算し た結合.係数を前記入力した 3次元データの圧縮データとして出力するステップ、 を含むことを特徴とするデータ圧縮方法。
2 1 . c ) 圧縮判定手段が、 前記ステップ bで計算された結合係数および前 記基底 3次元データ群から 3次元データを復元し、 該復元した 3次元データと前 記合成対象 3次元データとを比較し、 復元精度が予め定められた精度に満たない 場合には、 新たな基底 3次元データを 3次元データの合成に使用する基底 3次元 データ群に追加するステップ、 を含むことを特徴とする請求項 2 0記載のデータ 圧縮方法。
2 2 . d ) 基底デーダ選択手段が、 前記合成対象 3次元データの合成に適し た複数の基底 3次元データを、 3次元データの合成に使用する基底 3次元データ 群から選択するステップ、 を含むことを特徴とする請求項 2 0または 2 1記載の データ圧縮方法。 、
2 3 . 前記圧縮データに、 前記結合係数に加えて、 結合に使用した基底 3次 元データを特定する選択情報を含ませることを特徴とする請求項 2 1または 2 2 記載のデータ圧縮方法。
2 4 . a ) 対応点決定手段が、 3次元データを入力し、 頂点の対応関係を決 める基準となる参照 3次元データの頂点に前記入力した 3次元データの頂点を対 応付けた合成対象 3次元データを作成するステップ、
b ) 領域分割手段が、 前記合成対象 3次元データを複数の部分領域に分割する ステップ、
c ) 係数計算手段が、 3次元データの合成に使用する同じ部分領域に分割され た基底 3次元データ群を結合して前記合成対象 3次元データを合成するための結 合係数を部分領域ごとに計算し、 該計算した部分領域ごとの結合係数を前記入力 した 3次元データの圧縮データとして出力するステップ、 を含むことを特徴とす るデータ圧縮方法。
2 5 . a ) 対応点決定手段が、 3次元データを入力し、 頂点の対応関係を決 める基準となる参照 3次元データの IS点に前記入力した 3次元データの頂点を対 応付けた合成対象 3次元データを作成するステップ、
b ) 係数計算手段が、 3次元データの合成に使用する基底 3次元データ群を結 合して前記合成対象 3次元データを合成するための結合係数を計算し、 該計算し た結合係数を前記入力した 3次元データの圧縮データとして出力するステップ、 c ) 圧縮判定手段が、 前記ステップ bで計算された結合係数および前記基底 3 次元データ群から 3次元データを復元し、 該復元した 3次元データと前記合成対 象 3次元データとを比較し、 復元精度が予め定められた精度に満たない場合には、 前記合成対象 3次元データを前記領域分割手段によつて複数の部分領域に分割し、 同じ部分領域に分割された基底 3次元データ群を結合して前記合成対象 3次元デ ータを合成するための結合係数を前記係数計算手段によって部分領域ごとに計算 し、 該計算した部分領域ごとの結合係数を前記入力した 3次元データの圧縮デー タとして出力するステップ、 を含むことを特徴とするデータ圧縮方法。
2 6 . 部分領域に分割して圧縮しても全体の復元精度が予め定められた精度 に満たない場合には、 前記合成対象 3次元データをさらに細かい部分領域に分割. して部分領域ごとに結合係数を求めることを特徴とする請求項 2 5記載のデータ 圧縮方法。
2 7 . 前記圧縮データに、 前記部分領域を特定する部分領域決定データを含 ませることを特徴とする請求項 2 4、 2 5または 2 6記載のデータ圧縮方法。
2 8 . 前記圧縮データを着脱自在な記憶装置に記憶することを特徴とする請 求項 2 0乃至 2 7の何れか 1項に記載のデータ圧縮方法。
2 9 . 3次元データ復元手段が、 結合係数を含む圧縮データを入力し、 合成 に使用された複数の基底 3次元データを前記圧縮データに含まれる結合係数によ り結合して 3次元データを復元することを特徴とするデータ復元方法。
3 0 . a ) .基底データ読出手段が、 合成に使用された基底 3次元データ群の 選択情報および結合係数を含む圧縮データを入力し、 前記選択情報に基づいて圧 縮対象 3次元データの合成に使用された基底 3次元データ群を予め定めれた基底 3次元データ群から抽出するステップ、
3次元データ復元手段が、 前記抽出された基底 3次元データ群を前記圧縮デー タに含まれる結合係数により結合して 3次元データを復元するステツプ、 を含む ことを特徴とするデータ復元方法。
3 1 . a ) 基底データ読出手段が、 合成に使用された基底 3次元データ群の 部分領域を特定する部分領域決定データおよび部分領域ごとの結合係数を含む圧 縮データを入力し、 前記部分領域決定データに基づいて圧縮対象 3次元データの 合成に使用された基底 3次元データ群の部分領域を予め定められた基底 3次元デ ータ群から抽出するステップ、
b ) 3次元データ復元手段が、 前記抽出された基底 3次元データ群を前記圧縮 データに含まれる部分領域ごとの結合係数により同じ部分領域ごとに結合して 3 次元データを復元するステップ、 を含むことを特徴とするデータ復元方法。 .
3 2 . 前記圧縮データを着脱自在な記憶装置から入力することを特徴とする 請求項 2 9、 3 0または 3 1記載のデータ復元方法。
3 3 . . 請求項 2 0乃至 2 7の何れか 1項に記載されるデータ圧縮方法で生成 された圧縮データを記憶装置に記憶し、 該記憶装置から読み出した圧縮データを 請求項.2 9、 3 0または 3 1に記載されるデータ復元方法で 3次元データに復元 することを特徴とする圧縮復元方法。
3 4 . 請求項 2 0乃至 2 7の何れか 1項に記載されるデータ圧縮方法で生成 された圧縮データを、 データ伝送手段を通じて伝送することを特徴とするデータ 送信方法。
3 5 . 前記データ伝送手段は、 前記データ圧縮方法において前記基底 3次元 データ群に追加された基底 3次元データを圧縮データの送信先へ伝送することを 特徴とする請求項 3 4言己載のデータ送信方法。.
3 6 . データ伝送手段で受信した圧縮データを請求項 2 9、 3 0または 3 1 に記載されるデータ復元方法により 3次 データに復元することを特徴とするデ —タ受信方法。
3 7 . '前記データ伝送手段は、 追加の基底 3次元データを受信したとき前記 データ復元方法で使用する基底 3次元データ群に追加することを特徴とする請求 項 3 6記載のデータ受信方法。
3 8 . 請求項 3 4または 3 5に記載されるデータ送信方法と請求項 3 6また. は 3 7に記載されるデータ受信方法とを組み合わせたことを特徴とするデータ伝 ' 送方法。
3 9 . 頂点の対応関係を決める基準となる参照 3次元データおよび 3次元デ 一タの合成に使用する基底 '3次元データ群を記憶する記憶装置を有するコンビュ ータを、 :
3次元データを入力し、 前記参照 3次元データの頂点に前記入力した 3次元デ —タの頂点を対応付けた合成対象 3次元データを作成する対応点決定手段と、
3次元データの合成に使用する基底 3次元データ群を結合して前記合成対象 3 次元データを合成するための結合係数を計算し、 該計算した結合係数を前記入力 した 3次元データの圧縮データとして出力する係数計算手段として機能させるこ とを特徴とするデータ圧縮プログラム。
4 0 . 前記コンピュータを、 さらに、 前記係数計算手段で計算された結合係 数および前記基底 3次元データ群から 3次元データを復元し、 該復元した 3次元 データと前記合成対象 3次元データとを比較し、 復元精度が予め定められた精度 に満たない場合には、 新たな基底 3次元データを 3次元データの合成に使用する 基底 3次元データ群に追加する圧縮判定手段として機能させることを特徴とする 請求項 3 9記載のデータ圧縮プログラム。
4 1 . 前記コンピュータを、 さらに、 前記合成対象 3次元データの合成に適 した複数の基底 3次元データを、 3次元データの合成に使用する基底 3次元デ一 タ群から選択する基底データ選択手段として機能させることを特徴とする請求項 3 9または 4 0記載のデータ圧縮プログラム。
4 2 . 前記圧縮データに、 前記結合係数に加えて、 結合に使用した基底 3次 元データを特定する選択情報を含ませることを特徴とする請求項 4 0または 4 1 記載のデータ圧縮プログラム
4 3 . 前記コンピュータを、 さらに、 前記合成対象 3次元データを複数の部 分領域に分割する領域分割手段として機能させ、 かつ、 前記係数計算手段は、 同 じ部分領域に分割された基底 3次元データ群を結合して前記合成対象 3次元デー タを合成するための結合係数を部分領域ごとに計算し、 該計算した部分領域ごと の結合係数を前記入力した 3次元データの圧縮データとして出力することを特徴 とする請求項 3 9記載のデータ圧縮プログラム。
4 4 . 前記コンピュータを、. さらに、 前記合成対象 3次元データを複数の部 分領域に分割する領域分割手段と、 前記係数計算手段で計算された結合係数およ び前記基底 3次元データ群から 3次元データを復元し、 該復元した 3次元データ と前記合成対象 3次元データとを比較し、 復元精度が予め定められた精度に満た ない場合には、 前記合成対象 3次元データを前記領域分割手段によつて複数の部 分領域に分割し、 同じ部分領域に分割された基底 3次元データ群を結合して前記 合成対象 3次元データを合成するための結合係数を前記係数計算手段によって部 分領域ごとに計算し、 該計算した部分領域ごとの結合係数を前記入力した 3次元 データの圧縮データとして出力する圧縮判定手段として機能させることを特徴と する請求項 3 9記載のデータ圧縮プログラム。
4 5 . 前記圧縮判定手段は、 部分領域に分割して圧縮しても全体の復元精度 が予め定められた精度に満たない場合には,、 前記合成対象 3次元データをさらに 細かい部分領域に分割して部分領域ごとに結合係数を求める制御を行うことを特 徴とする請求項 4 4記載のデータ圧縮プログラム。
4 6 . 前記圧縮データに、 前記部分領域を特定する部分領域決定データを含 ませることを特徴とする請求項 4 3、 4 4または 4 5記載のデータ圧縮プロダラ ム。
4 7 . 前記圧縮データを着脱自在な記憶装置に記憶することを特徴とする請 求項 3 9乃至 4 6の何れか 1項に記載のデータ圧縮プログラム。
4 8 . 3次元データの合成に使用する基底 3次元データ群を記憶する記憶装 置を有するコンピュータを、
結合係数を含む圧縮データを入力し、 合成に使用された複数の基底 3次元デー タを前記圧縮データに含まれる結合係黎により結合して 3次元データを復元する 3次元データ復元手段として機能させることを特徴とするデータ復元プログラム。
4 9 . 3次元データの合成に使用する基底 3次元データ群を記憶する記憶装 置を有するコンピュータを、 合成に使用された基底 3.次元データ群の選択情報および結合係数を含む圧縮デ ータを入力し、 前記選択情報に基づいて圧縮対象 3次元データの合成に使用され た基底 3次元データ群を前記記憶装置から読み出す基底データ読出手段と、
^読み出された基底 3次元データ群を前記圧縮データに含まれる結合係数によ り結合して 3次元データを復元する 3次元データ復元手段として機能させるため のデータ復元プログラム。
5 0 . 3次元データの合成に使用する基底 3次元データ群を記憶する記憶装 置を有するコンピュータを、
合成に使用された基底 3次元データ群の部分領域を特定する部分領域決定デ一 タおよび部分領域ごとの結合係数を含む圧縮データを入力し、 前記部分領域決定 データに基づいて圧縮対象 3次元データの合成に使用された基底 3次元データ群 の部分領域を予め定められた基底 3次元データ群から抽出する基底データ読出手 段と、
該抽出された基底 3次元データ群を前記圧縮データに含まれる部分領域ごとの 結合係数により同じ部分領域ごとに結合して 3次元データを復元する 3次元デー タ復元手段として機能させるだめのデータ復元プログラム。
5 1 . 前記圧縮データを着脱自在な記憶装置から入力することを特徴とする 請求項 4 8、 4 9または 5 0記載のデータ復元プログラム。
5 2 . 請求項 3 9乃至 ·4 6の何れか 1項に記載されるデータ圧縮プログラム と請求項 4 8、 4 9または 5 0に記載されるデータ復元プログラムとを含む圧縮 復元フ。ログラム。
5 3 . 請求項 3 9乃至 4 6の何れか 1項に記載されるデータ圧縮プログラム と、 コンピュータを、 前記データ圧縮プログラムで生成された圧縮データを送信 するデータ伝送手段として機能させるプログラムとを含むデータ送信プログラム。
5 4 . 前記データ伝送手段は、 前記データ圧縮プログラムが基底 3次元デー タ群に追加した基底 3次元データを圧縮データの送信先へ伝送することを特徴と する請求項 5 3記載のデータ送信プログラム。
5 5 . 請求項 4 8、 4 9または 5 0に記載されるデータ復元プログラムと、 コンピュータを、 圧縮データを受信し前記データ復元プログラムへ入力するデー タ伝送手段として機能させるプログラムとを含むデータ受信プ口グラム。
5 6 . 前記データ伝送手段は、 追加の基底 3次元データを受信したとき記憶 装置に記憶された基底 3次元データ群に.追加することを特徴とする請求項 5 5記 载のデータ受信プログラム。
5 7 . 請求項 5 3または 5 4に記載されるデータ送信プログラムと請求項 5 5または 5 6に記載されるデータ受信プログラムとを含むデータ伝送プログラム。
PCT/JP2006/326303 2005-12-27 2006-12-22 データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム WO2007074912A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2007552029A JP4868171B2 (ja) 2005-12-27 2006-12-22 データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム
CN2006800493110A CN101346745B (zh) 2005-12-27 2006-12-22 数据压缩方法及装置、数据还原方法及装置
EP06843680A EP1968017A1 (en) 2005-12-27 2006-12-22 Data compression method and device, data decompression method and device and program
US12/087,102 US8248403B2 (en) 2005-12-27 2006-12-22 Data compression method and apparatus, data restoration method and apparatus, and program therefor
US13/221,299 US8878839B2 (en) 2005-12-27 2011-08-30 Data restoration method and apparatus, and program therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005-375138 2005-12-27
JP2005375138 2005-12-27

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US12/087,102 A-371-Of-International US8248403B2 (en) 2005-12-27 2006-12-22 Data compression method and apparatus, data restoration method and apparatus, and program therefor
US13/221,299 Division US8878839B2 (en) 2005-12-27 2011-08-30 Data restoration method and apparatus, and program therefor

Publications (1)

Publication Number Publication Date
WO2007074912A1 true WO2007074912A1 (ja) 2007-07-05

Family

ID=38218133

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/326303 WO2007074912A1 (ja) 2005-12-27 2006-12-22 データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム

Country Status (5)

Country Link
US (2) US8248403B2 (ja)
EP (1) EP1968017A1 (ja)
JP (1) JP4868171B2 (ja)
CN (1) CN101346745B (ja)
WO (1) WO2007074912A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7415937B2 (ja) 2018-10-02 2024-01-17 ソニーグループ株式会社 画像処理装置および方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103688548A (zh) * 2011-07-08 2014-03-26 汤姆逊许可公司 为具有重复结构的三维模型编码和解码位流的系统及方法
US9236024B2 (en) 2011-12-06 2016-01-12 Glasses.Com Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US20130314401A1 (en) 2012-05-23 2013-11-28 1-800 Contacts, Inc. Systems and methods for generating a 3-d model of a user for a virtual try-on product
US9483853B2 (en) 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US9984177B2 (en) * 2013-05-31 2018-05-29 Panasonic Intellectual Property Management Co., Ltd. Modeling device, three-dimensional model generation device, modeling method, program and layout simulator
JP2015012580A (ja) * 2013-07-02 2015-01-19 キヤノン株式会社 受信装置、受信方法及びプログラム
US11049285B2 (en) * 2019-06-21 2021-06-29 Disney Enterprises, Inc. Media content validation using geometrically encoded metadata
CN113287123A (zh) * 2019-12-03 2021-08-20 株式会社日立高新技术 搜索装置、搜索程序以及等离子处理装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10124680A (ja) * 1996-10-16 1998-05-15 Atr Ningen Joho Tsushin Kenkyusho:Kk イメージ生成装置およびイメージ生成方法
JP3341549B2 (ja) 1995-11-14 2002-11-05 ミノルタ株式会社 3次元形状データ処理装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2388095A1 (en) 1999-10-22 2001-05-03 Activesky, Inc. An object oriented video system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3341549B2 (ja) 1995-11-14 2002-11-05 ミノルタ株式会社 3次元形状データ処理装置
JPH10124680A (ja) * 1996-10-16 1998-05-15 Atr Ningen Joho Tsushin Kenkyusho:Kk イメージ生成装置およびイメージ生成方法

Non-Patent Citations (7)

* Cited by examiner, † Cited by third party
Title
"A Range Finder for Human Face Measurement", IEICE TECHNICAL REPORT, vol. 99, no. 118, pages 35 - 42
HANAOKA G. ET AL.: "Egakite no Gacho ni Motoduku Nigaoe no Jido Sakusei", THE TRANSACTIONS OF THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS JOHO SYSTEM III-JOHO SHORI, THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS, vol. J80-D-II, no. 8, 25 August 1997 (1997-08-25), pages 2110 - 2118, XP003015053 *
KAMESHIMA H. ET AL.: "Jintai Keisoku Data eno Patch Model Atehame", THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS 2005 NEN SOGO TAIKAI KOEN RONBUNSHU JOHO SYSTEM 2, THE JOURNAL OF THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS, 7 March 2005 (2005-03-07), pages 259, XP003015051 *
OKAZAKI T. ET AL.: "Chokko Kao Kitei o Mochiita Kao Gazo Fugoka", IEICE TECHNICAL REPORT, HC91-54~60, HUMAN COMMUNICATION, THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS, vol. 91, no. 508, 10 March 1992 (1992-03-10), pages 47 - 54, XP003015054 *
OKAZAKI T. ET AL.: "Chokko kao Kitei o Mochiita Kao Gazo Notan Joho no Parameter Fugoka", GAZO FUGOKA SYMPOSIUM DAI 6 KAI SYMPOSIUM SHIRYO, THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS GAZO KOGAKU KENKYU SENMON IINKAI, 9 October 1991 (1991-10-09), pages 231 - 234, XP003015052 *
VOLKER BLANZ; THOMAS VETTER: "A Morphable Model For The Synthesis Of 3D Faces", SIGGRAPH 99 CONFERENCE PROCEEDINGS, pages 187 - 194
W. J. SCHROEDER; J. A. ZARGE; W. E. LORENSEN: "Decimation of Triangle Meshes", COMPUTER GRAPHICS, 26 February 1992 (1992-02-26), pages 65 - 70

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7415937B2 (ja) 2018-10-02 2024-01-17 ソニーグループ株式会社 画像処理装置および方法

Also Published As

Publication number Publication date
US20110311131A1 (en) 2011-12-22
EP1968017A1 (en) 2008-09-10
US20090040216A1 (en) 2009-02-12
JPWO2007074912A1 (ja) 2009-06-04
CN101346745A (zh) 2009-01-14
CN101346745B (zh) 2013-03-27
US8248403B2 (en) 2012-08-21
JP4868171B2 (ja) 2012-02-01
US8878839B2 (en) 2014-11-04

Similar Documents

Publication Publication Date Title
JP4868171B2 (ja) データ圧縮方法及び装置、データ復元方法及び装置ならびにプログラム
JP3901644B2 (ja) テクスチャ画像圧縮装置及び方法、テクスチャ画像抽出装置及び方法、データ構造、記憶媒体
JP4384813B2 (ja) 時間依存ジオメトリの圧縮
Golla et al. Real-time point cloud compression
US7643033B2 (en) Multi-dimensional texture mapping apparatus, method and program
US20080303814A1 (en) Three-dimensional data processing system
KR20060087662A (ko) 3차원 사각 메쉬의 기하 정보 데이터 단순 압축 및 해제 기술
KR20060087631A (ko) 3차원 삼각 메쉬의 기하 정보 데이터 단순 압축 및 해제 기술
EP0822516A2 (en) Shape data compression/decompression method and apparatus
US6326966B1 (en) Methods for high precision, memory efficient surface normal compression and expansion
KR20000029715A (ko) 화상매핑장치및방법과화상생성장치및방법
Siddeq et al. 3D point cloud data and triangle Face compression by a novel geometry minimization algorithm and comparison with other 3D formats
JP3688937B2 (ja) 統合確率推定値生成方法、符号化方法、統合確率推定値生成装置及び記録媒体
JP2755663B2 (ja) 符号化装置
JPH09134437A (ja) 座標データ圧縮方法
WO2022131946A2 (en) Devices and methods for spatial quantization for point cloud compression
Smith et al. Layered animation using displacement maps
ORAL et al. A Brief History of 3D Mesh Compression
Del Rio et al. Hardware implementation of the subdivision loop algorithm
KR0154947B1 (ko) 3차원 컬러 스테레오 스코픽 병렬처리를 위한 아핀변환 장치
KR0153978B1 (ko) 3차원 컬러 스테레오 스코픽 병렬처리를 위한 아핀변환 장치
WO2022131947A1 (en) Devices and methods for scalable coding for point cloud compression
Grabner et al. Adaptive quantization with error bounds for compressed view-dependent multiresolution meshes.
JPH02250090A (ja) 文字・図形データ処理方法
JPH05183741A (ja) 色空間変換装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200680049311.0

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007552029

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 12087102

Country of ref document: US

Ref document number: 2006843680

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE