用在 IoT 裝置上的壓縮演算法 Heatshrink
source link: https://blog.gslin.org/archives/2021/09/29/10351/%e7%94%a8%e5%9c%a8-iot-%e8%a3%9d%e7%bd%ae%e4%b8%8a%e7%9a%84%e5%a3%93%e7%b8%ae%e6%bc%94%e7%ae%97%e6%b3%95-heatshrink/
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
用在 IoT 裝置上的壓縮演算法 Heatshrink
在「Heatshrink – An ultra-lightweight compression library for embedded systems」這邊看到的演算法 Hearshrink，可以看到主打是在記憶體的用量受限的環境下壓縮。
在 2013 年的資料就有壓縮率的比較了：「heatshrink: An Embedded Data Compression Library」。
像是目前常被拿來使用的 ESP32 就只有 320KB 記憶體，gzip 就明顯太肥大了，HS 在這邊就可以犧牲壓縮率來換效能...
另外找了一下資料，發現有 lowzip 這個東西，走 ZIP 格式，記憶體用量也不高，不過軟體本身還掛 alpha：
Current x64 code footprint (for lowzip.c, excluding the test program) is about 3.2kB and RAM footprint is about 1.1kB.
如果之後打算要透過 LPWAN 之類的網路傳東西的話好像有可能會用到，先寫下來...
Related
WebP 的檔案大小未必比 JPEG 小...
在「Is WebP really better than JPEG?」這邊發現在差不多的條件需求下，WebP 壓出來的檔案大小未必會比 JPEG 小。 先講結論：提供服務的人可以先確認自家的 JPEG 壓縮是不是有先用 MozJPEG (壓縮率更好)，然後再考慮要不要支援 WebP。 Google 在推 WebP 這個格式的時候，宣稱失真壓縮的部份可以比 JPEG 小 25%～34%：(出自「A new image format for the Web」) WebP lossless images are 26% smaller in size compared to PNGs. WebP lossy images are 25-34% smaller than comparable JPEG images at…
June 25, 2020In "Browser"
檔案壓縮順序造成壓縮率的差異
Hacker News Daily 上看到「Why are tar.xz files 15x smaller when using Python's tar library compared to macOS tar?」這篇，作者問了為什麼他用 Python 的 tarfile 壓出來比起用 tar 壓出來小了 15 倍，檔案都是 JSON 檔壓成 XZ 格式： I'm compressing ~1.3 GB folders each filled with 1440 JSON files and find that there's a 15-fold difference between using…
March 15, 2021In "Computer"
cURL 支援 Zstandard
在「curl 7.72.0 – more compression」這邊看到新版的 cURL 要支援 Zstandard 了，查了一下發現 Zstandard 有對應的 RFC，在 RFC 8478：「Zstandard Compression and the application/zstd Media Type」。 對應到 server 端的部份，看起來可以用 tokers/zstd-nginx-module 搭 (在 nginx 環境下)，不然就是 application 端要自己壓縮了。 不過普及率比較高的演算法是 Google 主導的 Brotli，查了一下壓縮率大概在同一個等級。 Facebook 沒有自家瀏覽器，推這些東西比較辛苦一點，但這次 cURL 決定支援 Zstandard 算是一個開始，讓開發者多了一個選擇可以用...
August 19, 2020In "Computer"
Author Gea-Suan LinPosted on September 29, 2021Categories Computer, Library, Murmuring, Programming, SoftwareTags algorithm, compression, data, embedded, footprint, heatshrink, library, memory Leave a Reply Cancel reply
Your email address will not be published. Required fields are marked *
Comment
Name *
Email *
Website
Notify me of follow-up comments by email.
Notify me of new posts by email.
Post navigation
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK