#kafka · IT Дайджест

6. Шесть багов в одной цепи: segfault в glibc, утечка 345K сокетов и лавина из 474K соединений

Расследование падений Kafka-инфраструктуры выявило цепочку из шести ошибок. Среди них — 11-летний баг в glibc, роняющий процесс при неудачной реинициализации резолвера, и 14-летняя регрессия в таймаутах Async. Каждый баг маскировал следующий: починили segfault — всплыла утечка сокетов, исправили утечку — получили всплеск из 474 тысяч соединений.

habr.com · #infra #debugging #glibc #kafka #linux #networking

14. Kafka в проде: сжатие спасло кластер от переполненного диска

На Хабре описали боевую историю про Kafka: consumer groups, lag, offset commit и встроенное сжатие сообщений. Сюжет без глянца — retention не успевал чистить диск, кластер начал задыхаться, и автор показывает, как compression помог выиграть время вместо того, чтобы героически покупать новые терабайты.

habr.com · #infra #compression #consumer-groups #kafka #offsets #retention