AWS cambió la compresión de S3 de gzip a zstd y redujo el tamaño alrededor de un 30%

• Ante la pregunta de cuánto desperdicio eliminó zstd, creado por Yann Collet, esto fue lo que respondió Adrian Cockcroft
• En la escala de exabytes de S3, un 30% representa un ahorro de costos enorme
• También se dice que Twitter, al cambiar a zstd en HDFS, ahorró cada año varios miles de millones de wones (~ mid 8 figs/yr)

[alstjr7375]

Uber también cambió de GZIP/SNAPPY a ZSTD.
https://www.uber.com/en-TW/blog/cost-efficiency-big-data/

[jaehong747]

¡zstd es increíble!

Comparto el enlace porque tiene material comparativo sobre rendimiento de compresión.
https://github.com/facebook/zstd

[jaehong747]

Hoy probé zstd por primera vez.
Parece que ya venía incluido por defecto en macOS.

Para comprimir: zstd file => file.zst
Para descomprimir: unzstd file.zst => file

[xguru]

• Renacimiento de los algoritmos de compresión
• Cómo ahorramos millones de dólares en costos de SSD con una actualización del sistema de archivos
• Arch Linux cambia la herramienta de compresión de paquetes de xz a Zstandard