[Generyczny_nick]

Mireczki potrzebuję się poradzić w temacie CI/CD.

Na openshifcie (z helmem) mam postawioną kafkę z zookeeperem (obrazy od bitnami).
Prosta konfiguracja, dwa topici, po jednym podzie (replicaset na 1)

Problem w tym, że zookeeper często pada (przynajmniej raz na dobę) w efekcie czego serwisy które wysyłają/odbierają wiadomości z kafki nie pracują poprawnie bo kafka nie odbiera/wysyła.

Zastanawiam się, jak można rozwiązać tego typu problem.
Jakiś healthcheck czy np. zookeeper się nie popsuł czy coś?

#programowanie #naukaprogramowania #programista15k #kafka #zookeeper #cicd #docker #kubernetes #helm

[laki1]

@Generyczny_nick: Ja bym radził skupić się na znalezieniu przyczyny dlaczego to pada a nie maskował problemy restartami

[Djelon]

@Generyczny_nick: wewnętrzny check kubernetesa może ci go restartować jak nie działa.

[pulse]

@Generyczny_nick: ja bym proponowal przejscie na operator https://operatorhub.io/operator/strimzi-kafka-operator ;)

[pulse]

@Generyczny_nick: a informacje dlaczego zookeeper padl mozesz szukac w eventach

[Generyczny_nick]

@pulse: mi to wygląda na dosyć generyczne błędy. Jakbyś mógł, rzuć okiem na logi:
kafka: https://pastebin.com/mDSRGPii
zookeeper: https://pastebin.com/hXUhtaDZ

[pulse]

@Generyczny_nick: https://github.com/wurstmeister/kafka-docker/issues/389
prawdopodobnie nie ustawiasz prawidlowo broker id.

tutaj widac ze ten obraz jak nie ma podane to sam sobie wygeneruje https://github.com/bitnami/bitnami-docker-kafka/blob/master/2/debian-10/rootfs/opt/bitnami/scripts/kafka/setup.sh

wiec najsprosciej zrobic statefulset i ustawiac broker id na nazwe poda

w logu zookeepera nic konkretnego nie widac, poza tym ze zerwane zostalo polaczenie