AWS, S3 sıkıştırmasını gzip'ten zstd'ye geçirerek boyutu yaklaşık %30 azalttı

• Yann Collet'in yaptığı zstd'nin ne kadar gereksiz şeyi azalttığı sorusuna Adrian Cockcroft'un verdiği yanıt
• S3'ün exabyte ölçeğinde %30, muazzam bir maliyet tasarrufu anlamına geliyor
• Twitter'ın da HDFS'de zstd'ye geçerek her yıl yüz milyonlarca won (~ mid 8 figs/yr) tasarruf ettiği belirtiliyor

[alstjr7375]

Uber da GZIP/SNAPPY'den ZSTD'ye geçti.
https://www.uber.com/en-TW/blog/cost-efficiency-big-data/

[jaehong747]

zstd gerçekten inanılmazmış!

Bağlantıda sıkıştırma performansı karşılaştırma verileri var, paylaşayım.
https://github.com/facebook/zstd

[jaehong747]

Bugün ilk kez zstd kullandım.
Meğer macOS'ta varsayılan olarak yerleşikmiş.

Sıkıştırma: zstd file => file.zst
Açma: unzstd file.zst => file

[xguru]

• Sıkıştırma algoritmalarının rönesansı
• Dosya sistemi yükseltmesiyle SSD maliyetinde milyonlarca dolar tasarruf etme deneyimi
• Arch Linux, paket sıkıştırma aracını xz'den Zstandard'a geçirdi