KR101191813B1 - 데이터 압축 예측 장치 및 예측 방법 - Google Patents
데이터 압축 예측 장치 및 예측 방법 Download PDFInfo
- Publication number
- KR101191813B1 KR101191813B1 KR1020100103352A KR20100103352A KR101191813B1 KR 101191813 B1 KR101191813 B1 KR 101191813B1 KR 1020100103352 A KR1020100103352 A KR 1020100103352A KR 20100103352 A KR20100103352 A KR 20100103352A KR 101191813 B1 KR101191813 B1 KR 101191813B1
- Authority
- KR
- South Korea
- Prior art keywords
- data block
- characters
- different characters
- data
- interval
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000013144 data compression Methods 0.000 title claims abstract description 15
- 238000005259 measurement Methods 0.000 claims description 16
- 238000007906 compression Methods 0.000 description 37
- 230000006835 compression Effects 0.000 description 37
- 230000008901 benefit Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000007334 memory performance Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/60—General implementation details not specific to a particular type of compression
- H03M7/6035—Handling of unkown probabilities
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/60—General implementation details not specific to a particular type of compression
- H03M7/6011—Encoder aspects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Probability & Statistics with Applications (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
또한, 데이터블록을 미리 설정된 N 간격으로 읽되, 상기 간격의 n번째(1≤n≤N) 위치들에 있는 문자들 중 서로 다른 문자의 개수를 각각 측정하고 상기 측정된 값들을 합하여 상기 데이터블록의 서로 다른 문자의 개수를 측정하는 측정단계 및; 상기 측정된 서로 다른 문자의 개수를 기초로 하여 상기 데이터블록의 압축여부를 예측하는 예측단계를 포함하는 데이터 압축 예측 방법을 제공한다
Description
도 2는 일 실시예에 따른 압축 예측 장치의 블록도이다.
도 3은 개시된 기술의 일 실시예에 따른 데이터 압축 예측 방법을 설명하기 위한 순서도이다.
도 4는 일 실시예에 따라 MS-OFFICE의 설치된 파일을 대상으로 압축 예측을 수행하여 압축 가능한 데이터블록 및 압축이 되지 않은 데이터블록의 분포를 보여주는 그래프이다.
202 : 예측부
Claims (16)
- 데이터블록을 미리 설정된 N 간격으로 읽되, 상기 간격의 n번째(1≤n≤N) 위치들에 있는 문자들 중 서로 다른 문자의 개수를 각각 측정하고 상기 측정된 값들을 합하여 상기 데이터블록의 서로 다른 문자의 개수를 측정하는 측정부 및;
상기 측정된 서로 다른 문자의 개수를 기초로 하여 상기 데이터블록의 압축여부를 예측하는 예측부를 포함하는 데이터 압축 예측 장치. - 제 1항에 있어서, 상기 측정부는
상기 데이터블록으로부터 소정의 샘플을 선택하여 상기 샘플을 미리 설정된 N 간격으로 읽고, 상기 간격의 n번째(1≤n≤N) 위치들에 있는 문자들 중 서로 다른 문자의 개수를 각각 측정하고 상기 측정된 값들을 합하여 상기 데이터블록의 서로 다른 문자의 개수를 측정하는 데이터 압축 예측 장치. - 제 1항에 있어서, 상기 예측부는
미리 설정된 임계값과 상기 서로 다른 문자의 개수를 비교하여, 상기 서로 다른 문자의 개수가 상기 임계값보다 작으면 상기 데이터블록을 압축가능한 데이터블록으로 예측하는 데이터 압축 예측 장치. - 제 1항에 있어서,
상기 미리 설정된 N 간격은 4바이트 간격인 데이터 압축 예측 장치. - 제 1항에 있어서,
상기 데이터블록의 크기는 4KB인 데이터 압축 예측 장치. - 제 1항에 있어서,
상기 데이터 압축예측 장치는 상기 데이터블록이 x-match 방법에 의해 압축되는지 여부를 예측하는 데이터 압축 예측 장치. - 삭제
- 제 2항에 있어서,
상기 소정의 샘플 크기는 32바이트 내지 256바이트인 데이터 압축 예측 장치. - 데이터블록을 미리 설정된 N 간격으로 읽되, 상기 간격의 n번째(1≤n≤N) 위치들에 있는 문자들 중 서로 다른 문자의 개수를 각각 측정하고 상기 측정된 값들을 합하여 상기 데이터블록의 서로 다른 문자의 개수를 측정하는 측정단계 및;
상기 측정된 서로 다른 문자의 개수를 기초로 하여 상기 데이터블록의 압축여부를 예측하는 예측단계를 포함하는 데이터 압축 예측 방법. - 제 9항에 있어서, 상기 측정단계는
상기 데이터블록으로부터 소정의 샘플을 선택하여 상기 샘플을 미리 설정된 N 간격으로 읽고, 상기 간격의 n번째(1≤n≤N) 위치들에 있는 문자들 중 서로 다른 문자의 개수를 각각 측정하고 상기 측정된 값들을 합하여 상기 데이터블록의 서로 다른 문자의 개수를 측정하는 데이터 압축 예측 방법. - 제 9항에 있어서, 상기 예측단계는
미리 설정된 임계값과 상기 서로 다른 문자의 개수를 비교하여, 상기 서로 다른 문자의 개수가 상기 임계값보다 작으면 상기 데이터블록을 압축가능한 데이터블록으로 예측하는 데이터 압축 예측 방법. - 제 9항에 있어서,
상기 미리 설정된 N 간격은 4바이트 간격인 데이터 압축 예측 방법. - 제 9항에 있어서,
상기 데이터블록의 크기는 4KB인 데이터 압축 예측 방법. - 제 9항에 있어서,
상기 데이터 압축예측 장치는 상기 데이터블록이 x-match 방법에 의해 압축되는지 여부를 예측하는 데이터 압축 예측 방법. - 삭제
- 제 10항에 있어서,
상기 소정의 샘플 크기는 32바이트 내지 256바이트인 데이터 압축 예측 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100103352A KR101191813B1 (ko) | 2010-10-22 | 2010-10-22 | 데이터 압축 예측 장치 및 예측 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100103352A KR101191813B1 (ko) | 2010-10-22 | 2010-10-22 | 데이터 압축 예측 장치 및 예측 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20120041930A KR20120041930A (ko) | 2012-05-03 |
KR101191813B1 true KR101191813B1 (ko) | 2012-10-16 |
Family
ID=46262820
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100103352A Expired - Fee Related KR101191813B1 (ko) | 2010-10-22 | 2010-10-22 | 데이터 압축 예측 장치 및 예측 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101191813B1 (ko) |
-
2010
- 2010-10-22 KR KR1020100103352A patent/KR101191813B1/ko not_active Expired - Fee Related
Non-Patent Citations (1)
Title |
---|
논문:정보과학회논문지 |
Also Published As
Publication number | Publication date |
---|---|
KR20120041930A (ko) | 2012-05-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zhao et al. | Significantly improving lossy compression for HPC datasets with second-order prediction and parameter optimization | |
US8659452B2 (en) | Data compression devices, operating methods thereof, and data processing apparatuses including the same | |
US8244992B2 (en) | Policy based data retrieval performance for deduplicated data | |
JP4871999B2 (ja) | フレーム型データの可変分解能処理 | |
US8407378B2 (en) | High-speed inline data compression inline with an eight byte data path | |
US9946464B2 (en) | Systems and methods for predicting compressibility of data | |
US20120131266A1 (en) | Memory controller, data storage system including the same, method of processing data | |
CN105183669A (zh) | 一种数据存储方法及装置 | |
CN112713899B (zh) | Fpga码流数据的压缩方法、装置及存储介质 | |
KR101842420B1 (ko) | 정보 처리 장치 및 데이터 관리 방법 | |
JP6345346B2 (ja) | 分析装置及び分析方法及び分析プログラム | |
JP6544253B2 (ja) | 未知のバイナリモジュールのための有効な入力を決定する方法及び非一時的なコンピュータ可読媒体 | |
KR101191813B1 (ko) | 데이터 압축 예측 장치 및 예측 방법 | |
EP3537303B1 (en) | Trace data compression method selection device. method, and program | |
CN113360902B (zh) | shellcode的检测方法、装置、计算机设备及计算机存储介质 | |
US11936404B2 (en) | Data aware compression in a storage system | |
US9372636B1 (en) | Tiered-storage design | |
US9348535B1 (en) | Compression format designed for a very fast decompressor | |
US10255166B2 (en) | Determination of valid input sequences for an unknown binary program | |
KR101815807B1 (ko) | 압축된 컨트롤 신호를 이용한 효과적인 x 마스킹 장치 및 방법 | |
US9411515B1 (en) | Tiered-storage design | |
CN116679991B (zh) | 存储器的启动管理方法、系统、设备及存储介质 | |
US9558109B2 (en) | Method and apparatus for flash memory arithmetic encoding and decoding | |
CN112580297B (zh) | 一种编解码数据的方法、电子设备及存储介质 | |
US20090259994A1 (en) | Apparatus, Method, and Computer Program Product for Analyzing Program Memory Operations |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20101022 |
|
PA0201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20120420 Patent event code: PE09021S01D |
|
PG1501 | Laying open of application | ||
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20121008 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20121010 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20121011 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration | ||
FPAY | Annual fee payment |
Payment date: 20151109 Year of fee payment: 4 |
|
PR1001 | Payment of annual fee |
Payment date: 20151109 Start annual number: 4 End annual number: 4 |
|
LAPS | Lapse due to unpaid annual fee | ||
PC1903 | Unpaid annual fee |
Termination category: Default of registration fee Termination date: 20180721 |