Souhlasím, že Kafka je super a neštěstí trochu je tam ten Zookeeper s nutností mít aktivní nadpoloviční počet uzlů zoo, aby to celé funfgovalo. Sice je deklarováno, že se pracuje na odstranění závislost na Zoo v Kafce, ale bude to ještě chvíli trvat. :-(
Experimentuji s použitím Apache Ignite v roli jako Kakfy, protože tam ten Zoo není (respektive se jeho zapojení doporučuje pro lokační služby až když mám 100+ serverů) a data z Kafky se stejně braly do Ignite, tak použít pár vyhrazených keší nebo queue v Ignite jako vstupní stream (protože i ten defaultní Kafka streamer v Ignite má svoje mouchy, pokud nemám komerční verzi od GridGainu nebo nepoužiju pro Kafka->Ignite transformaci něco jiného, ať už vlastní bastl nebo Apache Spark/Flink).