Прототип Cache Transcoding сжимает текстовые активы (HTML, JSON, CSS, JS) алгоритмом zstd уровня 3 перед записью на диск. Средний коэффициент сжатия — 2,83x. Кодирование стоит 4,31 нс/байт (один раз при заполнении), декодирование — 1,56 нс/байт (при каждой отдаче). Это расширяет эффективную ёмкость кеша и уменьшает трафик между дата-центрами.
blog.cloudflare.com · #infra #cache #cloudflare #compression #zstd
Google опубликовал TurboQuant — алгоритм квантизации KV-кэша, сжимающий его в 5–6 раз без дообучения модели. Инвесторы Micron, Samsung, SK Hynix запаниковали, потеряв суммарно $90 млрд капитализации за неделю. Подробный разбор на Хабре: как работает и почему не панацея.
habr.com · #ai #ai #compression #hardware #memory
Автор выложил кодек misa77 на GitHub и утверждает, что он распаковывает данные примерно в 2 раза быстрее LZ4 при сопоставимых коэффициентах сжатия в своем классе. Упор сделан не на магию, а на банальные вещи, которые обычно и дают выигрыш: меньше ветвлений и формат, удобный для out-of-order ядер. Сжатие, правда, медленное — классика жанра: быстро читать, долго писать.
github.com · #tool #codec #compression #github #lz4 #show-hn
Иво Кадзела с помощью Codex выжал правдоподобную ASCII-карту мира из 445 байт данных. Фокус там в deflate и в том, что fetch() умеет работать с data: URI — из-за чего весь трюк выглядит как маленький злой учебник по компрессии и веб-хакам.
simonwillison.net · #blog #ascii #compression #data #javascript
На Хабре описали боевую историю про Kafka: consumer groups, lag, offset commit и встроенное сжатие сообщений. Сюжет без глянца — retention не успевал чистить диск, кластер начал задыхаться, и автор показывает, как compression помог выиграть время вместо того, чтобы героически покупать новые терабайты.
habr.com · #infra #compression #consumer-groups #kafka #offsets #retention