JP6005273B2 - データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 - Google Patents
データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 Download PDFInfo
- Publication number
- JP6005273B2 JP6005273B2 JP2015518931A JP2015518931A JP6005273B2 JP 6005273 B2 JP6005273 B2 JP 6005273B2 JP 2015518931 A JP2015518931 A JP 2015518931A JP 2015518931 A JP2015518931 A JP 2015518931A JP 6005273 B2 JP6005273 B2 JP 6005273B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- cluster
- data stream
- code table
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 51
- 230000005540 biological transmission Effects 0.000 title claims description 28
- 238000012804 iterative process Methods 0.000 claims description 21
- 238000009826 distribution Methods 0.000 claims description 14
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 230000007423 decrease Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
- H03M7/42—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code using table look-up for the coding or decoding process, e.g. using read-only memory
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
は、クラスタc内のブロックbで出現する相応のシンボルの頻度に対応する。
ここで、
が成り立つとき、上記の式の最後の項がなくなる。上記の値δc,bは、ブロックbがクラスタcに追加されたときのクラスタcのエントロピーの変化を表しており、特許請求の範囲に記載されているような距離値の1つの実施形態である。図1において、距離値は参照符号dによって表されている。ここで述べた距離値δc,bは、あとで説明するk平均アルゴリズムによる反復処理において用いられる。
Claims (11)
- データストリーム(DS)の符号化方法であって、
前記データストリーム(DS)は、アルファベットから成るシンボル(S)である複数のキャラクタを含み、前記データストリーム(DS)の前記キャラクタは、複数のブロック(B)にまとめられており、前記ブロック(B)は、個々のブロック(B)ごとに適用される符号テーブル(CT)に基づき、エントロピー符号化される、
データストリーム(DS)の符号化方法において、
・前記複数のブロック(B)を、距離値(d)に基づき反復処理(IT)を通して、複数のクラスタ(CL)に割り当て、ただし前記距離値(d)は、あるブロック(B)をあるクラスタ(CL)に追加したときの、該クラスタ(CL)のエントロピー(ET)の変化が小さくなるにつれて、該ブロック(B)と該クラスタ(CL)との距離値(d)が小さくなるように、定義されており、前記各ブロックは、ブロックとクラスタとの距離値(d)が最小のクラスタに、ブロックがそれぞれ割り当てられるように、前記反復処理(IT)の各反復ステップのたびに、前記各クラスタ(CL)に対して再割り当てされ、
・前記反復処理(IT)を通して決定されたクラスタ(CL)に、それぞれ1つの符号テーブル(CT)を割り当てる、なお、該符号テーブル(CT)は、個々のクラスタ(CL)中に含まれる複数のブロック(B)の少なくとも一部におけるシンボル(S)の頻度分布に基づき規定され、該符号テーブル(CT)は、個々のクラスタ(CL)のすべてのブロック(B)に適用される、
符号化方法において、
それぞれ1つのブロックから成る複数のクラスタ(CL)を決定し、ついで残りのブロック(B)を、該ブロック(B)とクラスタ(CL)との距離値(d)が最小となるクラスタ(CL)にそれぞれ割り当てるように、前記反復処理(IT)を初期化し、
前記反復処理の初期化は、
最初に、データストリーム(DS)中、エントロピー(ET)が最小のブロック(B)を1つ決定し、該ブロック(B)から成る1つのクラスタ(CL)を形成し、
次に、既存のクラスタ(CL)までの最小距離値(d)が最大であるブロック(B)を漸次決定し、この決定したブロックに対し、前記複数のクラスタ(CL)がそれぞれ1つのブロックを有するまで、この決定されたブロックから成るさらに別のクラスタを形成する、ことを含む
ことを特徴とする、符号化方法。 - 各反復ステップごとに、すべてのクラスタ(CL)のエントロピーの和として総エントロピー(TE)を算出し、個々の反復ステップにおいて算出された総エントロピー(TE)と、先行の反復ステップにおいて算出された総エントロピー(TE)との差が、予め定められた閾値よりも小さければ、前記反復処理(IT)を中止する、
請求項1記載の方法。 - 反復ステップの最大回数を超えたならば、前記反復処理(IT)を中止する、
請求項1または2記載の方法。 - 前記ブロック(B)をハフマン符号化によってエントロピー符号化する、
請求項1から3のいずれか1項記載の方法。 - 前記データストリーム(DS)は、ソフトウェア更新データ、例えば移動電話用のソフトウェア更新データを含む、
請求項1から4のいずれか1項記載の方法。 - データストリームを符号化するための符号化装置であって、
前記データストリーム(DS)は、アルファベットから成るシンボル(S)である複数のキャラクタを含み、前記データストリーム(DS)の前記キャラクタは、複数のブロック(B)にまとめられており、前記符号化装置(CM)は、個々のブロック(B)ごとに適用される符号テーブル(CT)に基づき、前記ブロック(B)をエントロピー符号化するために設けられており、
該符号化装置(CM)は、第1手段(M1)および第2手段(M2)を含み、
前記第1手段(M1)は、距離値(d)に基づき反復処理を通して、前記複数のブロック(B)を複数のクラスタ(CL)に割り当てるものであり、ただし前記距離値(d)は、あるブロック(B)をあるクラスタ(CL)に追加したときの、該クラスタ(CL)のエントロピー(ET)の変化が小さくなるにつれて、該ブロック(B)と該クラスタ(CL)との距離値(d)が小さくなるように、定義されており、かつ、前記ブロック(B)は、ブロック(B)とクラスタ(CL)との距離値(d)が最小のクラスタ(CL)に、該ブロック(B)がそれぞれ割り当てられるように、前記反復処理(IT)の反復ステップごとに、前記クラスタ(CL)に対しての再割り当てが行われ、
前記第2手段(M2)は、前記反復処理(IT)を通して決定されたクラスタ(CL)に、それぞれ1つの符号テーブル(CT)を割り当てるものであり、該符号テーブル(CT)は該第2手段(M2)によって、個々のクラスタ(CL)中に含まれる複数のブロック(B)の少なくとも一部におけるシンボル(S)の頻度分布に基づき規定され、かつ、該符号テーブル(CT)は、個々のクラスタ(CL)のすべてのブロック(B)に適用される、
符号化装置において、
前記符号化装置は以下のように構成されている、すなわち、
それぞれ1つのブロックから成る複数のクラスタ(CL)を決定し、ついで残りのブロック(B)を、該ブロック(B)とクラスタ(CL)との距離値(d)が最小となるクラスタ(CL)にそれぞれ割り当てるように、前記反復処理(IT)を初期化し、
前記反復処理の初期化は、
最初に、データストリーム(DS)中、エントロピー(ET)が最小のブロック(B)を1つ決定し、該ブロック(B)から成る1つのクラスタ(CL)を形成し、
次に、既存のクラスタ(CL)までの最小距離値(d)が最大であるブロック(B)を漸次決定し、この決定したブロックに対し、前記複数のクラスタ(CL)がそれぞれ1つのブロックを有するまで、この決定されたブロックから成るさらに別のクラスタを形成する、ことを含む、
ように構成されていることを特徴とする、
データストリームを符号化するための符号化装置。 - 請求項2から5のいずれか1項記載の方法を実施するように構成されている、請求項6記載の符号化装置。
- データストリーム(DS)の送信方法において、
請求項1から5のいずれか1項記載の方法によってデータストリーム(DS)を符号化し、
該符号化したデータストリーム(CD)と、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを送信する
ことを特徴とする、
データストリーム(DS)の送信方法。 - データストリーム(DS)を送信するための送信装置において、
請求項6または7記載の符号化装置(CM)と、
該符号化装置(CM)により符号化されたデータストリーム(CD)と、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを送信する手段(SM)と
が設けられている
ことを特徴とする、
データストリーム(DS)を送信するための送信装置。 - データストリームの伝送方法において、
前記データストリーム(DS)を、請求項8記載の方法によって送信し、受信装置(RE)により受信し、該受信装置は、複数のクラスタ(CL)のための符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報とを用いて、符号化されたデータストリーム(CD)を復号化する
ことを特徴とする、
データストリームの伝送方法。 - データストリーム(DS)の伝送装置において、
前記データストリーム(DS)を送信するための請求項9記載の送信装置(SE)と、受信手段(RM)および復号化装置(DM)を備えた受信装置(RE)とが設けられており、
前記受信手段(RM)は、符合化されたデータストリーム(CD)、および複数のクラスタ(CL)のための符号テーブル(CT)、ならびに該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの情報を受信し、
前記復号化装置(DM)は、前記符号テーブル(CT)と、該符号テーブル(CT)がいずれのブロック(B)に適用されるのかの前記情報とを用いて、前記符号化されたデータストリーム(CD)を復号化する
ことを特徴とする、
データストリーム(DS)の伝送装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102012211031.3 | 2012-06-27 | ||
DE102012211031A DE102012211031B3 (de) | 2012-06-27 | 2012-06-27 | Verfahren zur Codierung eines Datenstroms |
PCT/EP2013/060698 WO2014001001A1 (de) | 2012-06-27 | 2013-05-24 | Verfahren zur codierung eines datenstroms |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015523024A JP2015523024A (ja) | 2015-08-06 |
JP6005273B2 true JP6005273B2 (ja) | 2016-10-12 |
Family
ID=48570093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015518931A Expired - Fee Related JP6005273B2 (ja) | 2012-06-27 | 2013-05-24 | データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9319064B2 (ja) |
EP (1) | EP2823568B1 (ja) |
JP (1) | JP6005273B2 (ja) |
DE (1) | DE102012211031B3 (ja) |
HU (1) | HUE037553T2 (ja) |
WO (1) | WO2014001001A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9513813B1 (en) | 2015-12-18 | 2016-12-06 | International Business Machines Corporation | Determining prefix codes for pseudo-dynamic data compression utilizing clusters formed based on compression ratio |
JP7013732B2 (ja) * | 2017-08-31 | 2022-02-01 | 富士通株式会社 | 情報処理装置、情報処理方法及びプログラム |
CN117639792B (zh) * | 2023-11-27 | 2024-07-26 | 浙江大学 | 一种基于码表聚类的深度学习模型压缩方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2840589B2 (ja) * | 1996-02-09 | 1998-12-24 | 富士通株式会社 | データ圧縮装置及びデータ復元装置 |
JP3813025B2 (ja) | 1998-10-29 | 2006-08-23 | 株式会社リコー | デジタル音響信号符号化装置、デジタル音響信号符号化方法及びデジタル音響信号符号化プログラムを記録した媒体 |
US6959300B1 (en) * | 1998-12-10 | 2005-10-25 | At&T Corp. | Data compression method and apparatus |
US6404931B1 (en) | 1998-12-14 | 2002-06-11 | Microsoft Corporation | Code book construction for variable to variable length entropy encoding |
US7469070B2 (en) * | 2004-02-09 | 2008-12-23 | Lsi Corporation | Method for selection of contexts for arithmetic coding of reference picture and motion vector residual bitstream syntax elements |
US7689051B2 (en) * | 2004-04-15 | 2010-03-30 | Microsoft Corporation | Predictive lossless coding of images and video |
US7599840B2 (en) * | 2005-07-15 | 2009-10-06 | Microsoft Corporation | Selectively using multiple entropy models in adaptive coding and decoding |
DE102005056122A1 (de) * | 2005-11-23 | 2007-05-31 | Universität Zu Lübeck | Verfahren zur Kompression, Dekompression und Verarbeitung von Datensätzen |
US8112624B2 (en) * | 2006-11-29 | 2012-02-07 | Red Hat, Inc. | Method and system for certificate revocation list compression |
US8305244B2 (en) * | 2007-04-16 | 2012-11-06 | Hewlett-Packard Development Company, L.P. | Coding data using different coding alphabets |
US7791513B2 (en) * | 2008-10-06 | 2010-09-07 | Donald Martin Monro | Adaptive combinatorial coding/decoding with specified occurrences for electrical computers and digital data processing systems |
US8588178B2 (en) * | 2009-03-19 | 2013-11-19 | Qualcomm Incorporated | Adaptive association and joint association and resource partitioning in a wireless communication network |
US8633838B2 (en) * | 2010-01-15 | 2014-01-21 | Neverfail Group Limited | Method and apparatus for compression and network transport of data in support of continuous availability of applications |
HUE039299T2 (hu) * | 2010-09-09 | 2018-12-28 | Fraunhofer Ges Forschung | Entrópia kódolási és dekódolási séma |
-
2012
- 2012-06-27 DE DE102012211031A patent/DE102012211031B3/de active Active
-
2013
- 2013-05-24 WO PCT/EP2013/060698 patent/WO2014001001A1/de active Application Filing
- 2013-05-24 JP JP2015518931A patent/JP6005273B2/ja not_active Expired - Fee Related
- 2013-05-24 US US14/411,504 patent/US9319064B2/en not_active Expired - Fee Related
- 2013-05-24 HU HUE13726471A patent/HUE037553T2/hu unknown
- 2013-05-24 EP EP13726471.9A patent/EP2823568B1/de not_active Not-in-force
Also Published As
Publication number | Publication date |
---|---|
JP2015523024A (ja) | 2015-08-06 |
US20150162936A1 (en) | 2015-06-11 |
US9319064B2 (en) | 2016-04-19 |
EP2823568A1 (de) | 2015-01-14 |
HUE037553T2 (hu) | 2018-09-28 |
EP2823568B1 (de) | 2018-02-21 |
DE102012211031B3 (de) | 2013-11-28 |
WO2014001001A1 (de) | 2014-01-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7548706B2 (ja) | データを圧縮する方法および装置 | |
US20190363733A1 (en) | Methods and apparatus to parallelize data decompression | |
JP5221047B2 (ja) | 圧縮率の向上のために改善されたコンテキストモデル選択を使用するcabac符号化方法及び装置、並びにcabac復号化方法及び装置 | |
JP4786796B2 (ja) | 周波数領域オーディオ符号化のためのエントロピー符号モード切替え | |
JP4801776B2 (ja) | データ圧縮 | |
US7623047B2 (en) | Data sequence compression | |
CN106560010B (zh) | Vlsi高效霍夫曼编码设备和方法 | |
US20110181448A1 (en) | Lossless compression | |
CN116151740B (zh) | 一种库存交易数据过程安全管理系统及云平台 | |
JP6045123B2 (ja) | エンコーダ、デコーダ及び方法 | |
US6919826B1 (en) | Systems and methods for efficient and compact encoding | |
CN110021369B (zh) | 基因测序数据压缩解压方法、系统及计算机可读介质 | |
KR20160123302A (ko) | 데이터의 소스-인코딩 및 디코딩 디바이스 및 방법 | |
KR20150092585A (ko) | 이진 영상에 기반한 유전체 데이터 압축 방법 및 장치 | |
JP6005273B2 (ja) | データストリームの符号化方法、送信方法、伝送方法、データストリームを符号化するための符号化装置、送信装置、および、伝送装置 | |
CN114614829A (zh) | 卫星数据帧的处理方法、装置、电子设备和可读存储介质 | |
US7786903B2 (en) | Combinatorial coding/decoding with specified occurrences for electrical computers and digital data processing systems | |
JP5913748B2 (ja) | セキュアで損失のないデータ圧縮 | |
JP6426212B2 (ja) | 制限されたキャリー演算による算術コーディングを遂行するための方法及び装置 | |
CN111274950B (zh) | 特征向量数据编解码方法及服务器和终端 | |
KR100636370B1 (ko) | 결정 비트를 이용한 부호화 장치 및 그 방법과 그에 따른복호화 장치 및 그 방법 | |
JP2008067351A (ja) | 符号化装置、復号化装置、符号化方法及びプログラム | |
KR20160106229A (ko) | 문맥기반 분포데이터의 블럭화를 이용한 허프만 부호화의 효율화 방법 및 그 장치 | |
KR101549740B1 (ko) | 이진 데이터의 압축 및 압축해제 방법과 장치 | |
EP2485420A1 (en) | Data transmitting apparatus, data generating program and data transmitting/receiving method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160310 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160808 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160906 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6005273 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |