Nadchodzi moduł replikacji: mechanika ISR, high watermark, acks=all i min.insync.replicas, wybór lidera oraz to, co naprawdę tracimy przy nieczystym wyborze. Dwanaście scenariuszy o gwarancjach, z których Kafka słynie.
Grupy konsumentów, strategie przydziału partycji, statyczne członkostwo i dwa timeouty decydujące o tym, kiedy członek grupy znika. Dziesięć nowych scenariuszy, dzięki którym rebalans — najczęściej źle rozumiany moment w Kafce — można obejrzeć, zamiast zgadywać.
Symulator Kafki v1.1 dodaje dziesięć scenariuszy obejmujących batchowanie producenta, partycjonowanie, kompresję, backpressure, ponawianie prób i idempotentność.
KIP-714 pozwala klientom Kafki wysyłać własne metryki do brokerów przez OTLP. monedula-metrics-reporter przekazuje teraz również te metryki, obok metryk broker SPI i Yammer.
Najważniejsze lekcje płynące z Kafki kryją się w przejściach: przed i po awarii brokera, przed i po skurczeniu się ISR. Zbudowaliśmy działający w przeglądarce symulator, dzięki któremu możesz bezpiecznie zepsuć klaster i zobaczyć dokładnie, dlaczego reaguje tak, a nie inaczej.
Przeniesienie istniejącego środowiska Kafka z ACL do Confluent RBAC to ćwiczenie z zarządzania ryzykiem, a nie konwersja składni. Oto bezpieczny, audytowalny i powtarzalny przepływ migracji — oraz narzędzie, które do tego zbudowaliśmy.
Dlaczego metryki Kafki są uciążliwe, dlaczego dashboardy JMX często nie pokazują żadnych danych i jak natywnie eksportować metryki Kafki przez OTLP.