《電子技術應用》
您所在的位置:首頁 > 模擬設計 > 設計應用 > 一種LZ4無損壓縮電路設計
一種LZ4無損壓縮電路設計
2022年電子技術應用第12期
劉 勇,郭建剛,方 震
中國電子科技集團公司第五十八研究所,江蘇 無錫214035
摘要: 為緩解存儲系統中軟件壓縮算法對計算資源的大量占用,使用LZ4算法設計了一種無損壓縮電路。提出了一種循環隊列結構的滑動字典,結合散列表模塊構建LZ4無損壓縮電路,最后使用Calgary和Canterbury語料庫,在Xilinx KC705 FPGA平臺對電路進行驗證并與軟件壓縮對比。結果表明所設計的LZ4無損壓縮電路保持了軟件壓縮相同的壓縮率的同時,在壓縮效率上遠超過軟件壓縮。
中圖分類號: TN46
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.222840
中文引用格式: 劉勇,郭建剛,方震. 一種LZ4無損壓縮電路設計[J].電子技術應用,2022,48(12):59-64.
英文引用格式: Liu Yong,Guo Jiangang,Fang zhen. The design of the lossless compression circuit based on LZ4 algorithm[J]. Application of Electronic Technique,2022,48(12):59-64.
The design of the lossless compression circuit based on LZ4 algorithm
Liu Yong,Guo Jiangang,Fang Zhen
No.58 Institute,China Electronic and Technology Corporation,Wuxi 214035,China
Abstract: To decrease the costs of the implementation of compression by software in a storage system, the lossless compression circuit based on LZ4 algorithm is proposed in this paper. The sliding dictionary with circulating queue structure is used, together with the Hash Table module to design the lossless compression circuit based on LZ4. Finally, the design is tested and verified with Calgary corpus and Canterbury corpus on Xilinx KC705 FPGA platform. The results are compared with LZ4 software method and it can be concluded that the compression efficiency of LZ4 circuit method greatly faster than the software method obviously, while the compress ratios keep the same.
Key words : LZ4;lossless compression;sliding dictionary

0 引言

    隨著計算機和網絡技術的飛速發展和用戶的激增,互聯網產生的數據量也呈現爆發式增長的態勢。如何提高存儲器利用效率,存儲不斷產生的海量數據,成為存儲系統領域的一大難題。自兩位以色列研究者Ziv和Lempel在1977年提出了LZ77壓縮算法[1]以來,各種基于字典匹配的LZ壓縮算法的變體相繼被提出,其中包括LZ78、LZW、LZO、LZSS等。其中,基于LZ77的變體被廣泛用于文本和位圖的無損壓縮,其壓縮編碼的效率可以很大程度上逼近信源的信息熵值[2]LZ4正是LZ77壓縮算法面向處理速度進行優化所得的變體算法,其處理速度可達傳統LZ77壓縮算法的6倍以上[3],目前已被廣泛用于高吞吐量的存儲系統[4-5]。LZ4壓縮算法的速度優勢在于建立字典的過程中,減少了計算散列值和更新散列表單元的次數,并且采用直接編碼的方式輸出編碼,減小了輸出延遲[6-7]。但同樣由于降低散列表更新次數,導致LZ4壓縮算法的壓縮率會高于其他變體壓縮算法。

    與此同時,現有的LZ4壓縮算法基本基于x86架構計算機的軟件實現,處理效率低。而且在存儲系統的訪問過程中,后臺運行的壓縮程序將會占用大量中央處理器(CPU)的運算資源,造成存儲系統請求響應延遲上升,嚴重情況下甚至抵消LZ4壓縮算法的速度優勢。因此需要設計一種專用硬件電路實現LZ4無損壓縮,以釋放存儲系統中的運算資源,提高系統實時性。




本文詳細內容請下載:http://www.viuna.cn/resource/share/2000005041




作者信息:

劉  勇,郭建剛,方  震

(中國電子科技集團公司第五十八研究所,江蘇 無錫214035)




wd.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 国产精品亚洲午夜一区二区三区 | 精品视频手机在线观看免费 | 日韩18在线观看 | 天天做天天爱天天一爽一毛片 | 亚洲午夜精品久久久久久抢 | 911精品国产亚洲日本美国韩国 | 成人国产激情福利久久精品 | 亚洲七七久久精品中文国产 | 一级免费毛片 | 人人草人| 亚洲三级在线免费观看 | 日本午夜免费福利视频 | 欧美日本高清视频在线观看 | 成人网18网站 | 欧美在线观看一区二区三 | 国产小视频在线高清播放 | 黄色操视频 | 日本伊人网 | a黄视频| 日韩版码免费福利视频 | 免费视频 久久久 | 不卡视频免费在线观看 | 成人免费一级毛片在线播放视频 | 欧美一区二区三区四区视频 | 日韩高清在线日韩大片观看网址 | 成人啪精品视频免费网站 | 日本视频一区二区 | 中文字幕 制服诱惑 | 日本三级日本三级人妇三级四 | 欧美日韩在线观看视频 | 在线观看啊啊啊 | 欧美日本视频一区 | 国产成人精品免费午夜 | 国产免费无遮挡在线观看视频 | 国产免费播放一区二区三区 | 在线簧片| 亚洲欧美日韩在线线精品 | 一本色综合 | 五月婷婷在线视频观看 | 天堂视频在线 | 国内偷自视频区视频综合 |