JP5549177B2 - 圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 - Google Patents
圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 Download PDFInfo
- Publication number
- JP5549177B2 JP5549177B2 JP2009243892A JP2009243892A JP5549177B2 JP 5549177 B2 JP5549177 B2 JP 5549177B2 JP 2009243892 A JP2009243892 A JP 2009243892A JP 2009243892 A JP2009243892 A JP 2009243892A JP 5549177 B2 JP5549177 B2 JP 5549177B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- row
- column
- empty
- rows
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000006837 decompression Effects 0.000 title claims description 68
- 230000006835 compression Effects 0.000 title claims description 67
- 238000000034 method Methods 0.000 title claims description 67
- 238000007906 compression Methods 0.000 claims description 57
- 238000010257 thawing Methods 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 120
- 238000013500 data storage Methods 0.000 description 60
- 238000010586 diagram Methods 0.000 description 54
- 238000013144 data compression Methods 0.000 description 31
- 238000005516 engineering process Methods 0.000 description 12
- 230000012447 hatching Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
行と列とが規定されている構造化データを圧縮する圧縮プログラムであって、
同一列において同一のデータが設定された、連続する複数の行を特定するステップと、
特定された前記複数の行において空以外のデータが設定されている場合、当該複数の行における2行目以降のデータとして、空を設定するステップと、
特定された前記複数の行において空が設定されている場合、当該複数の行における1行目のデータとして、空に対応する符号を設定するステップと、
を、コンピュータに実行させる圧縮プログラム。
行と列とが規定されている構造化データを解凍する解凍プログラムであって、
同一列において、空が設定された、連続する1以上の行を特定するステップと、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定するステップと、
空に対応する符号が設定された行に対し、空を設定するステップと、
を、コンピュータに実行させるための解凍プログラム。
行と列とが規定されている構造化データを圧縮する圧縮方法であって、
同一列において同一のデータが設定された、連続する複数の行を特定するステップと、
特定された前記複数の行において空以外のデータが設定されている場合、当該複数の行における2行目以降のデータとして、空を設定するステップと、
特定された前記複数の行において空が設定されている場合、当該複数の行における1行目のデータとして、空に対応する符号を設定するステップと、
を含み、コンピュータに実行される圧縮方法。
行と列とが規定されている構造化データを解凍する解凍方法であって、
同一列において、空が設定された、連続する1以上の行を特定するステップと、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定するステップと、
空に対応する符号が設定された行に対し、空を設定するステップと、
を含み、コンピュータに実行される解凍方法。
行と列とが規定されている構造化データを圧縮する圧縮装置であって、
同一列において同一のデータが設定された、連続する複数の行を特定する手段と、
特定された前記複数の行において空以外のデータが設定されている場合、当該複数の行における2行目以降のデータとして、空を設定する手段と、
特定された前記複数の行において空が設定されている場合、当該複数の行における1行目のデータとして、空に対応する符号を設定する手段と、
を有する圧縮装置。
行と列とが規定されている構造化データを解凍する解凍装置であって、
同一列において、空が設定された、連続する1以上の行を特定する手段と、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定する手段と、
空に対応する符号が設定された行に対し、空を設定する手段と、
を有する解凍装置。
行と列とが規定されている構造化データを圧縮する圧縮プログラムであって、
記憶装置に格納されている前記構造化データにおける少なくとも一部の要素位置に設定されているデータと当該データに対応する符号とを対応付けたデータである辞書を生成し、辞書格納部に格納するステップと、
前記構造化データにおける各列において、圧縮処理を実施するステップと、
を、コンピュータに実行させ、
前記圧縮処理が、
現在処理中の行に設定されている第1のデータが直前の行に設定されている第2のデータと一致するか判断し、一致する場合には圧縮データ格納部に格納され且つ前記構造化データと同一の構造を有するデータを含む圧縮データにおける同一要素位置のデータとして空を設定するステップと、
前記第1のデータが前記第2のデータと一致しない場合、前記現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には前記圧縮データにおける同一要素位置のデータとして当該空を表す符号を設定し、前記現在処理中の行に空が設定されていない場合には前記辞書格納部に格納されている前記辞書に応じて前記第1のデータ又は当該第1のデータに対応付けられている符号を前記圧縮データにおける同一要素位置におけるデータとして設定するステップと、
を含む
圧縮プログラム。
前記構造化データが、リレーショナルデータベースのデータ又はCSV形式のデータである
付記1記載の圧縮プログラム。
前記圧縮データが、前記構造化データと同一の構造を有し且つ空以外の場合ポインタが設定された第1データと前記ポインタにより指し示され且つ前記構造化データに含まれるデータ又は当該データに対応する符号が設定された第2データとを含む第1データ構造と、CSV形式のデータと、リレーショナルデータベースのデータとのいずれかである
付記1又は2記載の圧縮プログラム。
行と列とが規定されている構造化データを含む圧縮データを解凍する解凍プログラムであって、
記憶装置に格納されている前記構造化データにおける各列において、現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には当該現在処理中の行の直前の行のデータとして設定されたデータと同一のデータを、解凍データ格納部に格納され且つ前記圧縮データにおける前記構造化データと同一の構造を有する解凍データにおける同一要素位置のデータとして設定するステップと、
前記現在処理中の行に空が設定されていない場合、前記現在処理中の行に空を表す符号が設定されているか判断し、前記現在処理中の行に空を表す符号が設定されている場合には、前記解凍データにおける同一要素位置に空を設定するステップと、
前記現在処理中の行に空を表す符号が設定されていない場合には、データと当該データに対応する符号との対応付けデータであり且つ辞書データ格納部に格納されている辞書に応じて、前記現在処理中の行に設定されているデータ又は前記現在処理中の行に設定されている符号に対応付けられているデータを、前記解凍データにおける同一要素位置のデータとして設定するステップと、
を、コンピュータに実行させるための解凍プログラム。
前記圧縮データが、前記構造化データと同一の構造を有し且つ空以外の場合ポインタが設定された第1データと前記ポインタにより指し示され且つ前記構造化データに含まれるデータ又は当該データに対応する符号が設定された第2データとを含む第1データ構造と、CSV形式のデータと、リレーショナルデータベースのデータとのいずれかである
付記4記載の圧縮プログラム。
前記解凍データが、リレーショナルデータベースのデータ又はCSV形式のデータである
付記4又は5記載の圧縮プログラム。
行と列とが規定されている構造化データを圧縮する圧縮方法であって、
記憶装置に格納されている前記構造化データにおける少なくとも一部の要素位置に設定されているデータと当該データに対応する符号とを対応付けたデータである辞書を生成し、辞書格納部に格納するステップと、
前記構造化データにおける各列において、圧縮処理を実施するステップと、
を含み、コンピュータに実行され、
前記圧縮処理が、
現在処理中の行に設定されている第1のデータが直前の行に設定されている第2のデータと一致するか判断し、一致する場合には圧縮データ格納部に格納され且つ前記構造化データと同一の構造を有するデータを含む圧縮データにおける同一要素位置のデータとして空を設定するステップと、
前記第1のデータが前記第2のデータと一致しない場合、前記現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には前記圧縮データにおける同一要素位置のデータとして当該空を表す符号を設定し、前記現在処理中の行に空が設定されていない場合には前記辞書格納部に格納されている前記辞書に応じて前記第1のデータ又は当該第1のデータに対応付けられている符号を前記圧縮データにおける同一要素位置におけるデータとして設定するステップと、
を含む
圧縮方法。
行と列とが規定されている構造化データを含む圧縮データを解凍する解凍方法であって、
記憶装置に格納されている前記構造化データにおける各列において、現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には当該現在処理中の行の直前の行のデータとして設定されたデータと同一のデータを、解凍データ格納部に格納され且つ前記圧縮データにおける前記構造化データと同一の構造を有する解凍データにおける同一要素位置のデータとして設定するステップと、
前記現在処理中の行に空が設定されていない場合、前記現在処理中の行に空を表す符号が設定されているか判断し、前記現在処理中の行に空を表す符号が設定されている場合には、前記解凍データにおける同一要素位置に空を設定するステップと、
前記現在処理中の行に空を表す符号が設定されていない場合には、データと当該データに対応する符号との対応付けデータであり且つ辞書データ格納部に格納されている辞書に応じて、前記現在処理中の行に設定されているデータ又は前記現在処理中の行に設定されている符号に対応付けられているデータを、前記解凍データにおける同一要素位置のデータとして設定するステップと、
を含み、コンピュータに実行される解凍方法。
行と列とが規定されている構造化データを圧縮するデータ圧縮装置であって、
記憶装置に格納されている前記構造化データにおける少なくとも一部の要素位置に設定されているデータと当該データに対応する符号とを対応付けたデータである辞書を生成し、辞書格納部に格納する辞書生成部と、
前記構造化データにおける各列において、圧縮処理を実施する圧縮処理部と、
を有し、
前記圧縮処理部が、
現在処理中の行に設定されている第1のデータが直前の行に設定されている第2のデータと一致するか判断し、一致する場合には圧縮データ格納部に格納され且つ前記構造化データと同一の構造を有するデータを含む圧縮データにおける同一要素位置のデータとして空を設定し、
前記第1のデータが前記第2のデータと一致しない場合、前記現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には前記圧縮データにおける同一要素位置のデータとして当該空を表す符号を設定し、前記現在処理中の行に空が設定されていない場合には前記辞書格納部に格納されている前記辞書に応じて前記第1のデータ又は当該第1のデータに対応付けられている符号を前記圧縮データにおける同一要素位置におけるデータとして設定する
データ圧縮装置。
行と列とが規定されている構造化データを含む圧縮データを解凍するデータ解凍装置であって、
記憶装置に格納されている前記構造化データにおけるデータと当該データに対応する符号との対応付けデータである辞書を格納する辞書データ格納部と、
前記構造化データにおける各列において、現在処理中の行に空が設定されているか判断し、前記現在処理中の行に空が設定されている場合には当該現在処理中の行の直前の行のデータとして設定されたデータと同一のデータを、解凍データ格納部に格納され且つ前記圧縮データにおける前記構造化データと同一の構造を有する解凍データにおける同一要素位置のデータとして設定し、前記現在処理中の行に空が設定されていない場合、前記現在処理中の行に空を表す符号が設定されているか判断し、前記現在処理中の行に空を表す符号が設定されている場合には、前記解凍データにおける同一要素位置に空を設定し、前記現在処理中の行に空を表す符号が設定されていない場合には、前記辞書データ格納部に格納されている前記辞書に応じて、前記現在処理中の行に設定されているデータ又は前記現在処理中の行に設定されている符号に対応付けられているデータを、前記解凍データにおける同一要素位置のデータとして設定する解凍処理部と、
を有するデータ解凍装置。
4 辞書生成部 5 辞書格納部 6 第2構造化データ格納部
11 解凍処理部 12 直前データ格納部
13 第3構造化データ格納部 14 第2構造化データ格納部
15 辞書格納部
Claims (6)
- 行と列とが規定されている構造化データを圧縮して圧縮データを生成する圧縮プログラムであって、
前記構造化データにおける或る行の或る列を特定するステップと、
特定された前記或る行の前記或る列に設定されているデータが、前記或る行の1行前の前記或る列に設定されているデータと同じである場合、前記圧縮データにおける前記或る行の前記或る列に、空を設定するステップと、
特定された前記或る行の前記或る列に空が設定されており、且つ前記或る行の1行前の前記或る列に空以外のデータが設定されている場合、前記圧縮データにおける前記或る行の前記或る列に、空に対応する符号を設定するステップと、
を、コンピュータに実行させるための圧縮プログラム。 - 行と列とが規定されている構造化データを解凍する解凍プログラムであって、
同一列において、空が設定された、連続する1以上の行を特定するステップと、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定するステップと、
空に対応する符号が設定された行に対し、空を設定するステップと、
を、コンピュータに実行させるための解凍プログラム。 - 行と列とが規定されている構造化データを圧縮して圧縮データを生成する圧縮方法であって、
前記構造化データにおける或る行の或る列を特定するステップと、
特定された前記或る行の前記或る列に設定されているデータが、前記或る行の1行前の前記或る列に設定されているデータと同じである場合、前記圧縮データにおける前記或る行の前記或る列に、空を設定するステップと、
特定された前記或る行の前記或る列に空が設定されており、且つ前記或る行の1行前の前記或る列に空以外のデータが設定されている場合、前記圧縮データにおける前記或る行の前記或る列に、空に対応する符号を設定するステップと、
を含み、コンピュータに実行される圧縮方法。 - 行と列とが規定されている構造化データを解凍する解凍方法であって、
同一列において、空が設定された、連続する1以上の行を特定するステップと、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定するステップと、
空に対応する符号が設定された行に対し、空を設定するステップと、
を含み、コンピュータに実行される解凍方法。 - 行と列とが規定されている構造化データを圧縮して圧縮データを生成する圧縮装置であって、
前記構造化データにおける或る行の或る列を特定する手段と、
特定された前記或る行の前記或る列に設定されているデータが、前記或る行の1行前の前記或る列に設定されているデータと同じである場合、前記圧縮データにおける前記或る行の前記或る列に、空を設定する手段と、
特定された前記或る行の前記或る列に空が設定されており、且つ前記或る行の1行前の前記或る列に空以外のデータが設定されている場合、前記圧縮データにおける前記或る行の前記或る列に、空に対応する符号を設定する手段と、
を有する圧縮装置。 - 行と列とが規定されている構造化データを解凍する解凍装置であって、
同一列において、空が設定された、連続する1以上の行を特定する手段と、
当該特定された1以上の行に対し、その直前の行に設定されたデータを設定する手段と、
空に対応する符号が設定された行に対し、空を設定する手段と、
を有する解凍装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009243892A JP5549177B2 (ja) | 2009-10-22 | 2009-10-22 | 圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009243892A JP5549177B2 (ja) | 2009-10-22 | 2009-10-22 | 圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011090526A JP2011090526A (ja) | 2011-05-06 |
JP5549177B2 true JP5549177B2 (ja) | 2014-07-16 |
Family
ID=44108715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009243892A Active JP5549177B2 (ja) | 2009-10-22 | 2009-10-22 | 圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5549177B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9165010B2 (en) * | 2012-04-30 | 2015-10-20 | Sap Se | Logless atomic data movement |
JP6045415B2 (ja) * | 2013-03-22 | 2016-12-14 | Kddi株式会社 | データ構造化方法、データ再構成方法、データ構造化プログラム、データ再構成プログラム及びデータ符号化装置 |
JP6341205B2 (ja) * | 2013-05-30 | 2018-06-13 | 日本電気株式会社 | データ圧縮システム |
JP6733483B2 (ja) * | 2016-10-07 | 2020-07-29 | 富士通株式会社 | 符号化プログラム、符号化方法および符号化装置 |
JP6787231B2 (ja) | 2017-04-04 | 2020-11-18 | 富士通株式会社 | データ処理プログラム、データ処理方法およびデータ処理装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2591187B2 (ja) * | 1989-09-28 | 1997-03-19 | 日本電気株式会社 | データ圧縮方法 |
JPH05225215A (ja) * | 1991-11-29 | 1993-09-03 | Nec Corp | 電子伝票システム |
JPH07121571A (ja) * | 1993-10-26 | 1995-05-12 | Oki Electric Ind Co Ltd | データベース装置 |
JPH0962752A (ja) * | 1995-08-30 | 1997-03-07 | Sumitomo Metal Ind Ltd | 表作成装置及びその表作成方法 |
AU2003229021C1 (en) * | 2002-05-10 | 2009-09-17 | Oracle International Corporation | Storing and querying relational data in compressed storage format |
-
2009
- 2009-10-22 JP JP2009243892A patent/JP5549177B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2011090526A (ja) | 2011-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10116325B2 (en) | Data compression/decompression device | |
JP3009727B2 (ja) | 改良形データ圧縮装置 | |
EP3120266B1 (en) | Ozip compression and decompression | |
US20160112062A1 (en) | Parallel dictionary-based compression encoder | |
CN106549673B (zh) | 一种数据压缩方法及装置 | |
JP5549177B2 (ja) | 圧縮プログラム、方法及び装置、並びに解凍プログラム、方法及び装置 | |
WO2015029329A1 (en) | Data decompression utilizing pre-expanded dictionaries during decompression | |
CN104462176B (zh) | 用于通过使用解压缩图进行数据访问的系统和方法 | |
US20200294629A1 (en) | Gene sequencing data compression method and decompression method, system and computer-readable medium | |
CN111510718B (zh) | 通过图像文件的块间差异提高压缩率的方法及系统 | |
CN115438114B (zh) | 存储格式转换方法、系统、装置、电子设备及存储介质 | |
US20160204796A1 (en) | Enhanced compression, encoding, and naming for resource strings | |
CN108763546A (zh) | 一种数据格式的转换方法、装置、存储介质及终端 | |
US20160203152A1 (en) | Enhanced compression, encoding, and naming for resource strings | |
Nandi et al. | A compression technique based on optimality of LZW code (OLZW) | |
US20160203154A1 (en) | Enhanced compression, encoding, and naming for resource strings | |
US8930808B2 (en) | Processing rich text data for storing as legacy data records in a data storage system | |
US7167115B1 (en) | Method, apparatus, and computer-readable medium for data compression and decompression utilizing multiple dictionaries | |
US20160203151A1 (en) | Enhanced compression, encoding, and naming for resource strings | |
US20120109911A1 (en) | Compression Of XML Data | |
CN115904240A (zh) | 数据处理方法、装置、电子设备和存储介质 | |
CN111475679B (zh) | Html文档处理方法、页面显示方法和设备 | |
KR20220089211A (ko) | 문자 빈도 기반 서열 재정렬을 통한 fastq 데이터 압축 방법 및 장치 | |
CN112506651A (zh) | 一种大数据量环境中数据运算的方法和设备 | |
CN105893335B (zh) | 显示文本的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130912 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131001 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140422 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140505 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5549177 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |