JP2015523024A - データストリームの符号化方法 - Google Patents
データストリームの符号化方法 Download PDFInfo
- Publication number
- JP2015523024A JP2015523024A JP2015518931A JP2015518931A JP2015523024A JP 2015523024 A JP2015523024 A JP 2015523024A JP 2015518931 A JP2015518931 A JP 2015518931A JP 2015518931 A JP2015518931 A JP 2015518931A JP 2015523024 A JP2015523024 A JP 2015523024A
- Authority
- JP
- Japan
- Prior art keywords
- block
- cluster
- data stream
- code table
- entropy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 86
- 238000012804 iterative process Methods 0.000 claims abstract description 34
- 230000005540 biological transmission Effects 0.000 claims description 43
- 238000009826 distribution Methods 0.000 claims description 25
- 230000006835 compression Effects 0.000 description 12
- 238000007906 compression Methods 0.000 description 12
- 239000008186 active pharmaceutical agent Substances 0.000 description 8
- 230000007423 decrease Effects 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
- H03M7/42—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code using table look-up for the coding or decoding process, e.g. using read-only memory
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
は、クラスタc内のブロックbで出現する相応のシンボルの頻度に対応する。
ここで、
が成り立つとき、上記の式の最後の項がなくなる。上記の値δc,bは、ブロックbがクラスタcに追加されたときのクラスタcのエントロピーの変化を表しており、特許請求の範囲に記載されているような距離値の1つの実施形態である。図1において、距離値は参照符号dによって表されている。ここで述べた距離値δc,bは、あとで説明するk平均アルゴリズムによる反復処理において用いられる。
は、クラスタc内のブロックbで出現する相応のシンボルの頻度に対応する。
ここで、
が成り立つとき、上記の式の最後の項がなくなる。上記の値δc,bは、ブロックbがクラスタcに追加されたときのクラスタcのエントロピーの変化を表しており、特許請求の範囲に記載されているような距離値の1つの実施形態である。図1において、距離値は参照符号dによって表されている。ここで述べた距離値δc,bは、あとで説明するk平均アルゴリズムによる反復処理において用いられる。
Claims (14)
- データストリーム(DS)の符号化方法であって、
前記データストリーム(DS)は、アルファベットから成るシンボル(S)である複数のキャラクタを含み、前記データストリーム(DS)の前記キャラクタは、複数のブロック(B)にまとめられており、前記ブロック(B)は、個々のブロック(B)ごとに適用される符号テーブル(CT)に基づき、エントロピー符号化される、
データストリーム(DS)の符号化方法において、
・前記複数のブロック(B)を、距離値(d)に基づき反復処理(IT)を通して、複数のクラスタ(CL)に割り当て、ただし前記距離値(d)は、あるブロック(BL)をあるクラスタ(CL)に追加したときの、該クラスタ(CL)のエントロピー(ET)の変化が小さくなるにつれて、該ブロック(B)と該クラスタ(CL)との距離値(d)が小さくなるように、定義されており、前記各ブロックは、ブロックとクラスタとの距離値(d)が最小のクラスタに、ブロックがそれぞれ割り当てられるように、前記反復処理(IT)の各反復ステップのたびに、前記各クラスタ(CL)に対して再割り当てされ、
・前記反復処理(IT)を通して決定されたクラスタ(CL)に、それぞれ1つの符号テーブル(CT)を割り当てる、なお、該符号テーブル(CT)は、個々のクラスタ(CL)中に含まれる複数のブロック(B)の少なくとも一部におけるシンボル(S)の頻度分布に基づき規定され、該符号テーブル(CT)は、個々のクラスタ(CL)のすべてのブロック(B)に適用される
ことを特徴とする、
データストリーム(DS)の符号化方法。 - それぞれ1つのブロックから成る複数のクラスタ(CL)を決定し、ついで残りのブロック(B)を、該ブロック(B)とクラスタ(CL)との距離値(d)が最小となるクラスタ(CL)にそれぞれ割り当てるように、前記反復処理(IT)を初期化する、
請求項1記載の方法。 - 前記反復処理(IT)の初期化において、それぞれ1つのブロック(B)から成る複数のクラスタ(CL)をランダムに決定する、
請求項2記載の方法。 - 前記反復処理の初期化において、
最初に、データストリーム(DS)中、エントロピー(ET)が最小のブロック(B)を1つ決定し、該ブロック(B)から成る1つのクラスタ(CL)を形成し、
次に、既存のクラスタ(CL)までの最小距離値(d)が最大であるブロック(B)を漸次決定し、この決定したブロックに対し、前記複数のクラスタ(CL)がそれぞれ1つのブロックを有するまで、この決定されたブロックから成るさらに別のクラスタを形成する、
請求項2または3記載の方法。 - 各反復ステップごとに、すべてのクラスタ(CL)のエントロピーの和として総エントロピー(TE)を算出し、個々の反復ステップにおいて算出された総エントロピー(TE)と、先行の反復ステップにおいて算出された総エントロピー(TE)との差が、予め定められた閾値よりも小さければ、前記反復処理(IT)を中止する、
請求項1から4のいずれか1項記載の方法。 - 反復ステップの最大回数を超えたならば、前記反復処理(IT)を中止する、
請求項1から5のいずれか1項記載の方法。 - 前記ブロック(B)をハフマン符号化によってエントロピー符号化する、
請求項1から6のいずれか1項記載の方法。 - 前記データストリーム(DS)は、ソフトウェア更新データ、例えば移動電話用のソフトウェア更新データを含む、
請求項1から7のいずれか1項記載の方法。 - データストリームを符号化するための符号化装置であって、
前記データストリーム(DS)は、アルファベットから成るシンボル(S)である複数のキャラクタを含み、前記データストリーム(DS)の前記キャラクタは、複数のブロック(B)にまとめられており、前記符号化装置(CM)は、個々のブロック(B)ごとに適用される符号テーブル(CT)に基づき、前記ブロック(B)をエントロピー符号化するために設けられている、
符号化装置において、
該符号化装置(CM)は、第1手段(M1)および第2手段(M2)を含み、
前記第1手段(M1)は、距離値(d)に基づき反復処理を通して、前記複数のブロック(B)を複数のクラスタ(CL)に割り当てるものであり、ただし前記距離値(d)は、あるブロック(BL)をあるクラスタ(CL)に追加したときの、該クラスタ(CL)のエントロピー(ET)の変化が小さくなるにつれて、該ブロック(B)と該クラスタ(CL)との距離値(d)が小さくなるように、定義されており、かつ、前記ブロック(B)は、ブロック(B)とクラスタ(CL)との距離値(d)が最小のクラスタ(CL)に、該ブロック(B)がそれぞれ割り当てられるように、前記反復処理(IT)の反復ステップごとに、前記クラスタ(CL)に対しての再割り当てが行われ、
前記第2手段(M2)は、前記反復処理(IT)を通して決定されたクラスタ(CL)に、それぞれ1つの符号テーブル(CT)を割り当てるものであり、該符号テーブル(CT)は該第2手段(M2)によって、個々のクラスタ(CL)中に含まれる複数のブロック(B)の少なくとも一部におけるシンボル(S)の頻度分布に基づき規定され、かつ、該符号テーブル(CT)は、個々のクラスタ(CL)のすべてのブロック(B)に適用される
ことを特徴とする、
データストリームを符号化するための符号化装置。 - 請求項2から8のいずれか1項記載の方法を実施するように構成されている、請求項9記載の符号化装置。
- データストリーム(DS)の送信方法において、
請求項1から8のいずれか1項記載の方法によってデータストリーム(DS)を符号化し、
該符号化したデータストリーム(CD)と、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを送信する
ことを特徴とする、
データストリーム(DS)の送信方法。 - データストリーム(DS)を送信するための送信装置において、
請求項9または10記載の符号化装置(CM)と、
該符号化装置(CM)により符号化されたデータストリーム(CD)と、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを送信する手段(SM)と
が設けられている
ことを特徴とする、
データストリーム(DS)を送信するための送信装置。 - データストリームの伝送方法において、
前記データストリーム(DS)を、請求項11記載の方法によって送信し、受信装置(RE)により受信し、該受信装置は、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを用いて、符号化されたデータストリーム(CD)を復号化する
ことを特徴とする、
データストリームの伝送方法。 - データストリーム(DS)の伝送装置において、
前記データストリーム(DS)を送信するための請求項12記載の送信装置(SE)と、受信手段(RM)および復号化装置(DM)を備えた受信装置(RE)とが設けられており、
前記受信手段(RM)は、符合化されたデータストリーム(CD)、および複数のクラスタ(CL)のための符号テーブル(CT)、ならびに該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報を受信し、
前記復号化装置(DM)は、前記符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの前記情報とを用いて、前記符号化されたデータストリーム(CD)を復号化する
ことを特徴とする、
データストリーム(DS)の伝送装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102012211031A DE102012211031B3 (de) | 2012-06-27 | 2012-06-27 | Verfahren zur Codierung eines Datenstroms |
DE102012211031.3 | 2012-06-27 | ||
PCT/EP2013/060698 WO2014001001A1 (de) | 2012-06-27 | 2013-05-24 | Verfahren zur codierung eines datenstroms |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015523024A true JP2015523024A (ja) | 2015-08-06 |
JP6005273B2 JP6005273B2 (ja) | 2016-10-12 |
Family
ID=48570093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015518931A Expired - Fee Related JP6005273B2 (ja) | 2012-06-27 | 2013-05-24 | データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9319064B2 (ja) |
EP (1) | EP2823568B1 (ja) |
JP (1) | JP6005273B2 (ja) |
DE (1) | DE102012211031B3 (ja) |
HU (1) | HUE037553T2 (ja) |
WO (1) | WO2014001001A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019046023A (ja) * | 2017-08-31 | 2019-03-22 | 富士通株式会社 | 情報処理装置、情報処理方法及びプログラム |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9513813B1 (en) | 2015-12-18 | 2016-12-06 | International Business Machines Corporation | Determining prefix codes for pseudo-dynamic data compression utilizing clusters formed based on compression ratio |
CN117639792B (zh) * | 2023-11-27 | 2024-07-26 | 浙江大学 | 一种基于码表聚类的深度学习模型压缩方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137497A (ja) * | 1998-10-29 | 2000-05-16 | Ricoh Co Ltd | デジタル音響信号符号化装置、デジタル音響信号符号化方法及びデジタル音響信号符号化プログラムを記録した媒体 |
JP2002533005A (ja) * | 1998-12-14 | 2002-10-02 | マイクロソフト コーポレイション | 可変長から可変長へのエントロピー符号化のためのコードブック構成 |
JP2009501943A (ja) * | 2005-07-15 | 2009-01-22 | マイクロソフト コーポレーション | 適応コーディングおよびデコーディングでの複数のエントロピモデルの選択的使用 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2840589B2 (ja) * | 1996-02-09 | 1998-12-24 | 富士通株式会社 | データ圧縮装置及びデータ復元装置 |
US6959300B1 (en) * | 1998-12-10 | 2005-10-25 | At&T Corp. | Data compression method and apparatus |
US7469070B2 (en) * | 2004-02-09 | 2008-12-23 | Lsi Corporation | Method for selection of contexts for arithmetic coding of reference picture and motion vector residual bitstream syntax elements |
US7689051B2 (en) * | 2004-04-15 | 2010-03-30 | Microsoft Corporation | Predictive lossless coding of images and video |
DE102005056122A1 (de) * | 2005-11-23 | 2007-05-31 | Universität Zu Lübeck | Verfahren zur Kompression, Dekompression und Verarbeitung von Datensätzen |
US8112624B2 (en) * | 2006-11-29 | 2012-02-07 | Red Hat, Inc. | Method and system for certificate revocation list compression |
US8305244B2 (en) * | 2007-04-16 | 2012-11-06 | Hewlett-Packard Development Company, L.P. | Coding data using different coding alphabets |
US7791513B2 (en) * | 2008-10-06 | 2010-09-07 | Donald Martin Monro | Adaptive combinatorial coding/decoding with specified occurrences for electrical computers and digital data processing systems |
US8588178B2 (en) * | 2009-03-19 | 2013-11-19 | Qualcomm Incorporated | Adaptive association and joint association and resource partitioning in a wireless communication network |
US8633838B2 (en) * | 2010-01-15 | 2014-01-21 | Neverfail Group Limited | Method and apparatus for compression and network transport of data in support of continuous availability of applications |
EP2614592B1 (en) * | 2010-09-09 | 2018-06-27 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Entropy encoding and decoding scheme |
-
2012
- 2012-06-27 DE DE102012211031A patent/DE102012211031B3/de active Active
-
2013
- 2013-05-24 US US14/411,504 patent/US9319064B2/en not_active Expired - Fee Related
- 2013-05-24 WO PCT/EP2013/060698 patent/WO2014001001A1/de active Application Filing
- 2013-05-24 EP EP13726471.9A patent/EP2823568B1/de not_active Not-in-force
- 2013-05-24 HU HUE13726471A patent/HUE037553T2/hu unknown
- 2013-05-24 JP JP2015518931A patent/JP6005273B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137497A (ja) * | 1998-10-29 | 2000-05-16 | Ricoh Co Ltd | デジタル音響信号符号化装置、デジタル音響信号符号化方法及びデジタル音響信号符号化プログラムを記録した媒体 |
JP2002533005A (ja) * | 1998-12-14 | 2002-10-02 | マイクロソフト コーポレイション | 可変長から可変長へのエントロピー符号化のためのコードブック構成 |
JP2009501943A (ja) * | 2005-07-15 | 2009-01-22 | マイクロソフト コーポレーション | 適応コーディングおよびデコーディングでの複数のエントロピモデルの選択的使用 |
Non-Patent Citations (1)
Title |
---|
JPN6015050971; Farshid Golchin et al.: 'Minimum-Entropy Clustering and its Application to Lossless Image Coding' Image Processing, 1997. Proceedings., International Conference on 第2巻, 19971029, pp.262-265 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019046023A (ja) * | 2017-08-31 | 2019-03-22 | 富士通株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7013732B2 (ja) | 2017-08-31 | 2022-02-01 | 富士通株式会社 | 情報処理装置、情報処理方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20150162936A1 (en) | 2015-06-11 |
WO2014001001A1 (de) | 2014-01-03 |
HUE037553T2 (hu) | 2018-09-28 |
DE102012211031B3 (de) | 2013-11-28 |
EP2823568A1 (de) | 2015-01-14 |
US9319064B2 (en) | 2016-04-19 |
EP2823568B1 (de) | 2018-02-21 |
JP6005273B2 (ja) | 2016-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7548706B2 (ja) | データを圧縮する方法および装置 | |
US20190363733A1 (en) | Methods and apparatus to parallelize data decompression | |
JP4786796B2 (ja) | 周波数領域オーディオ符号化のためのエントロピー符号モード切替え | |
JP5221047B2 (ja) | 圧縮率の向上のために改善されたコンテキストモデル選択を使用するcabac符号化方法及び装置、並びにcabac復号化方法及び装置 | |
JP4801776B2 (ja) | データ圧縮 | |
US7623047B2 (en) | Data sequence compression | |
CN106560010B (zh) | Vlsi高效霍夫曼编码设备和方法 | |
US20110181448A1 (en) | Lossless compression | |
CN116151740B (zh) | 一种库存交易数据过程安全管理系统及云平台 | |
JP6045123B2 (ja) | エンコーダ、デコーダ及び方法 | |
US6919826B1 (en) | Systems and methods for efficient and compact encoding | |
US10749546B1 (en) | Method and system of content based dynamic data compression | |
KR20150092585A (ko) | 이진 영상에 기반한 유전체 데이터 압축 방법 및 장치 | |
JP6005273B2 (ja) | データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 | |
CN114614829A (zh) | 卫星数据帧的处理方法、装置、电子设备和可读存储介质 | |
CN108880559B (zh) | 数据压缩方法、数据解压缩方法、压缩设备及解压缩设备 | |
US20100085219A1 (en) | Combinatorial coding/decoding with specified occurrences for electrical computers and digital data processing systems | |
JP2015534795A (ja) | セキュアで損失のないデータ圧縮 | |
CN111274950B (zh) | 特征向量数据编解码方法及服务器和终端 | |
KR100636370B1 (ko) | 결정 비트를 이용한 부호화 장치 및 그 방법과 그에 따른복호화 장치 및 그 방법 | |
CN103746701A (zh) | 一种用于Rice无损数据压缩的快速编码选项选择方法 | |
KR20160106229A (ko) | 문맥기반 분포데이터의 블럭화를 이용한 허프만 부호화의 효율화 방법 및 그 장치 | |
KR101549740B1 (ko) | 이진 데이터의 압축 및 압축해제 방법과 장치 | |
EP2485420A1 (en) | Data transmitting apparatus, data generating program and data transmitting/receiving method | |
CN112749139B (zh) | 日志文件处理方法、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160310 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160808 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160906 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6005273 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |