Wszystko
Najnowsze
Archiwum
Kafka I / Rozpoczynamy całą serię wykładów Kafki.
Gdyby ktoś chciał posłuchać na temat twórczości Kafki. Wykład prowadzi Rabin Sacha Pecaric z internetowej Jesziwy Pardes.
z- 0
- #
- #
- #
- #
- #
- #
Mireczki potrzebuję się poradzić w temacie CI/CD.
Na openshifcie (z helmem) mam postawioną kafkę z zookeeperem (obrazy od bitnami).
Prosta konfiguracja, dwa topici, po jednym podzie (replicaset na 1)
Problem w tym, że zookeeper często pada (przynajmniej raz na dobę) w efekcie czego serwisy które wysyłają/odbierają wiadomości z kafki nie pracują poprawnie bo kafka nie odbiera/wysyła.
Na openshifcie (z helmem) mam postawioną kafkę z zookeeperem (obrazy od bitnami).
Prosta konfiguracja, dwa topici, po jednym podzie (replicaset na 1)
Problem w tym, że zookeeper często pada (przynajmniej raz na dobę) w efekcie czego serwisy które wysyłają/odbierają wiadomości z kafki nie pracują poprawnie bo kafka nie odbiera/wysyła.
@Generyczny_nick: Ja bym radził skupić się na znalezieniu przyczyny dlaczego to pada a nie maskował problemy restartami
@Generyczny_nick: https://github.com/wurstmeister/kafka-docker/issues/389
prawdopodobnie nie ustawiasz prawidlowo broker id.
tutaj widac ze ten obraz jak nie ma podane to sam sobie wygeneruje https://github.com/bitnami/bitnami-docker-kafka/blob/master/2/debian-10/rootfs/opt/bitnami/scripts/kafka/setup.sh
wiec najsprosciej zrobic statefulset i ustawiac broker id na
prawdopodobnie nie ustawiasz prawidlowo broker id.
tutaj widac ze ten obraz jak nie ma podane to sam sobie wygeneruje https://github.com/bitnami/bitnami-docker-kafka/blob/master/2/debian-10/rootfs/opt/bitnami/scripts/kafka/setup.sh
wiec najsprosciej zrobic statefulset i ustawiac broker id na
Mireczki pytanie z kategori CI/CD
Mam kafkę z zookeeperem postawioną na kubernetesie (okd, helm itp) i chciałbym po starcie poda z kafką stworzyć nowy topic.
W dokumentacji pod linkiem:
github.com/bitnami/bitnami-docker-kafka
Mam kafkę z zookeeperem postawioną na kubernetesie (okd, helm itp) i chciałbym po starcie poda z kafką stworzyć nowy topic.
W dokumentacji pod linkiem:
github.com/bitnami/bitnami-docker-kafka
@Generyczny_nick: to moze to: https://stackoverflow.com/a/44146351 i wtedy w lifecycle wywolujesz te komende?
Spróbuję aczkolwiek testowo dostałem approved na zmianę obrazu ;)
Mireczki szybkie pytanie: w mini serwisie uruchomionym za pośrednictwem node.js korzystam z kafki (kafka-node) w taki sposób, że z konkretnego topicu czytam eventy.
W momencie startu serwisu, gdy na kafce nie ma topicu który chcę obserwować (bo np. serwis który dany topic tworzy wstał później) dostaję error o treści:
ERROR: TopicsNotExistError: The topic(s) kafkaTopic3 do not exist
Chciałbym zastosować tam w takim wypadku próbę jakiegoś reconnecta bo niestety z automatu to się nie dzieje i
W momencie startu serwisu, gdy na kafce nie ma topicu który chcę obserwować (bo np. serwis który dany topic tworzy wstał później) dostaję error o treści:
ERROR: TopicsNotExistError: The topic(s) kafkaTopic3 do not exist
Chciałbym zastosować tam w takim wypadku próbę jakiegoś reconnecta bo niestety z automatu to się nie dzieje i
@Generyczny_nick: glupoty popisalem mireczku, tutaj masz 100% pewne soluszyn ( ͡° ͜ʖ ͡°)
const kafka = require('kafka-node');
const Consumer =
const kafka = require('kafka-node');
const Consumer =
@4191727801:
dzięki mireczku, po dostosowaniu do swoich potrzeb działa bardzo fajnie.
Wirtualne piwerko dla Ciebie ( ͡~ ͜ʖ ͡°)
dzięki mireczku, po dostosowaniu do swoich potrzeb działa bardzo fajnie.
Wirtualne piwerko dla Ciebie ( ͡~ ͜ʖ ͡°)
Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję od czasu do czasu informacje o ciekawych programach,
bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python, ale też #rustlang i #haskell
Pełna wersja tego zestawienia ☞ https://devopsiarz.pl/zestawienia/zestawienie-linkow-materialow-18-05-2020/
A jeśli chcesz jeszcze więcej, zapisz się do mailingu ☞
bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python, ale też #rustlang i #haskell
Pełna wersja tego zestawienia ☞ https://devopsiarz.pl/zestawienia/zestawienie-linkow-materialow-18-05-2020/
A jeśli chcesz jeszcze więcej, zapisz się do mailingu ☞
ⴲⴲⴲ
Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję od czasu do czasu informacje o ciekawych programach,
bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python. Ponadto jakieś ciekawe linki z tego
gatunku do
Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję od czasu do czasu informacje o ciekawych programach,
bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python. Ponadto jakieś ciekawe linki z tego
gatunku do
@devopsiarz: nie myślałeś o wysyłaniu mailowego newslettera z tymi linkami? Zapisałbym się
@devopsiarz: WINCYYJ KUBERNETEESA! a tak serio, to fajny spis linków, jak zawsze. szkoda, że rzadko kiedy coś się pojawia o GCP. aż tak mało o nim piszą, bo aż tak jest rynek zdominowany przez AWS/Azure?
Cześć. Tworzę aplikację serwerową (Java, Spring Boot) razem z klientem webowym (ReactJS). Będzie tam odczytywana między innymi temperatura z urządzeń dla konkretnego użytkownika. Aktualnie jeden z serwisów zbiera wszystkie pomiary i przy uzyciu kafka-stream patrzy czy został przekroczony próg i jeśli tak to zapisuje alarm do osobnego topicu (w tym topicu jest zawarty id usera). Chciałbym teraz zrobić jakąś komunikację z klientem, aby na bieżąco informować usera o alercie (wolałbym uniknąć okresowego
ⴲⴲⴲ
Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję od czasu do czasu informacje o ciekawych programach, bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python. Ponadto jakieś ciekawe linki z tego gatunku do takiego
Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję od czasu do czasu informacje o ciekawych programach, bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python. Ponadto jakieś ciekawe linki z tego gatunku do takiego
Wołam zainteresowanych (32) z listy devopsiarz
Możesz zapisać/wypisać się klikając na nazwę listy.
! @devopsiarz @login-jest-zajety @iMonkey @Finkel @xoxxox @olrajt @qbek @botul @moxie @johnyboy @xa0s @kornfan @cartsy @nowy000 @fsck_sdb @Kamilex97 @Pioka @Cesarz_Polski @Mediox @muzzy @Nixon52 @mavfly @PaprykowyBaron @Szymon_el_Pedro @poszlo_wyszlo @Michau1324 @Skylake @grzybosiur @Mattijjah
Możesz zapisać/wypisać się klikając na nazwę listy.
! @devopsiarz @login-jest-zajety @iMonkey @Finkel @xoxxox @olrajt @qbek @botul @moxie @johnyboy @xa0s @kornfan @cartsy @nowy000 @fsck_sdb @Kamilex97 @Pioka @Cesarz_Polski @Mediox @muzzy @Nixon52 @mavfly @PaprykowyBaron @Szymon_el_Pedro @poszlo_wyszlo @Michau1324 @Skylake @grzybosiur @Mattijjah
konto usunięte via Wykop Mobilny (Android)
Treść przeznaczona dla osób powyżej 18 roku życia...
konto usunięte via Wykop Mobilny (Android)
to jest jakiś żart, że nie mogę tu dodać zdjęcia
konto usunięte via Wykop Mobilny (Android)
No, enjoy
źródło: comment_WHSsbOmoLHQAmQChBh9cHSao0aKIRg9M.jpg
Pobierz
Treść przeznaczona dla osób powyżej 18 roku życia...
@varia_melancholika: W internetach onastenik występuje jako Doomer.
Ciekawy artykuł o ekologii. Sensownie napisany, i w sumie zmusza do refleksji.
Dla odpowiedzialnych za niszczenie planety korporacji nie ma nic prostszego niż zrzucić winę na osoby o niewielkiej świadomości ekologicznej. I tak też robią.
W rozmowach o „nieekologicznej konsumpcji” słyszymy także dobrze znany wszystkim w Europie słownik austerity – polityki cięć i oszczędności – z terminami takimi jak „roszczeniowość” czy „życie ponad stan”. Takie rozmowy prowadzą najczęściej bankierzy i siedzący w ich kieszeniach
@chaczapuri: znakomity tekst, który doskonale podsumowuje moje przemyślenia na temat ekologii (ʘ‿ʘ)
Winę zrzuca się na maluczkich, a ja na ten przykład bardzo chciałbym kupić pralkę czy lodówkę, która podziała dwadzieścia lat, ale nie mogę - nawet wysoka cena nie jest obecnie gwarantem trwałości. Podobnie jest z wieloma innymi produktami.
No i to wciskanie z etykietką "bio" i "eko" kosmicznie drogich produktów, jako odwracanie kota ogonem
Winę zrzuca się na maluczkich, a ja na ten przykład bardzo chciałbym kupić pralkę czy lodówkę, która podziała dwadzieścia lat, ale nie mogę - nawet wysoka cena nie jest obecnie gwarantem trwałości. Podobnie jest z wieloma innymi produktami.
No i to wciskanie z etykietką "bio" i "eko" kosmicznie drogich produktów, jako odwracanie kota ogonem
@chaczapuri: nie tylko pralki - samochody, w których często planuje się jakieś drobne i drogie elementy w okolicy, gdzie najczęściej dochodzi do zderzeń, telewizory firmy na S z ledwo dającymi radę kondensatorami, jeszcze najlepiej żeby zasilacz grzał całą elektronikę ( ͡º ͜ʖ͡º) Do wymiany cała płytka, bo przelutowywanie kondensatorów nikomu nie chce się już bawić, trudne do otworzenia obudowy, ubijanie sprzętu aktualizacjami itd.
Wmawia się
Wmawia się
Zaprzedam duszę za książkę!
Poszukuję książki w formie listów miłosnych pisanych przez Franza Kafkę do Mileny. Książka jest zatytułowana "Listy do Mileny". Wpadłam na jej fragmenty przypadkiem i siedzi mi ona okrutnie w głowie i potrzebuję ją mieć ;) przeszukałam księgarnie internetowe i antykwariaty, jak i również chomikuj i NIE MA.
Jeśli ktoś z Was posiada tą książkę czy to w formie papierowej czy pdf i chciałby sprzedać to ja bardzo chętnie.
Miłością
Poszukuję książki w formie listów miłosnych pisanych przez Franza Kafkę do Mileny. Książka jest zatytułowana "Listy do Mileny". Wpadłam na jej fragmenty przypadkiem i siedzi mi ona okrutnie w głowie i potrzebuję ją mieć ;) przeszukałam księgarnie internetowe i antykwariaty, jak i również chomikuj i NIE MA.
Jeśli ktoś z Was posiada tą książkę czy to w formie papierowej czy pdf i chciałby sprzedać to ja bardzo chętnie.
Miłością
@amranty_ Jaki masz plan teraz z ta duszą?
@chaczapuri: w necie można znaleźć kilka, ale przykładowo ten jest chyba jednym z piękniejszych, które czytałam:
Czemu nie jestem na przykład szczęśliwą szafą w Twoim pokoju, szafą, która patrzy na Ciebie całą, kiedy siedzisz w fotelu czy przy biurku, albo gdy kładziesz się i śpisz.
Albo
Czemu nie jestem na przykład szczęśliwą szafą w Twoim pokoju, szafą, która patrzy na Ciebie całą, kiedy siedzisz w fotelu czy przy biurku, albo gdy kładziesz się i śpisz.
Albo
#prasowkadev 25 lipca 2019 roku
(Nie?)zamierzony wyciek nowego menu #windows 10
https://www.theverge.com/2019/7/24/20708355/microsoft-windows-10-accidental-release-windows-insiders-start-menu
Dlaczego powinieneś pisać emaile w „plaintext”
(Nie?)zamierzony wyciek nowego menu #windows 10
https://www.theverge.com/2019/7/24/20708355/microsoft-windows-10-accidental-release-windows-insiders-start-menu
Dlaczego powinieneś pisać emaile w „plaintext”
Napisałem blog post na temat tego kiedy możemy stracić wiadomości wrzucane na #kafka :)
#programowanie #developer20
https://developer20.com/when-you-can-nose-messages-in-kafka/
#programowanie #developer20
https://developer20.com/when-you-can-nose-messages-in-kafka/
heh, dzięki, nie zauważyłem tej literówki :)
/ Big Data DevOps Administrator (middle, senior)
Kto: GetInData
Widełki: 10 000 - 16 000 PLN netto + szereg benefitów
Lokalizacja: Warszawa, Puławska 39
✍️Umowa: B2B
Kto: GetInData
Widełki: 10 000 - 16 000 PLN netto + szereg benefitów
Lokalizacja: Warszawa, Puławska 39
✍️Umowa: B2B
@Jobviously: ciekawa oferta, ale 16k dla seniora w takiej technologii to moim zdaniem za mało. HDP, Kafka i Nifi wymagają naprawdę ogromnej wiedzy i doświadczenia.
Mireczki z #kubernetes chce sobie postawić apache #kafka i ludzie na internetach piszą żeby zrobić to na statefulset z połączonym serwisem headlessowym tylko nie rozumiem po co dokładnie jest potrzebny ten serwis headlesowy i co daje w połączeniu z statefulsetem
@wojtaz131 mam taka sytuacje ze kupuje dom z kopciuchem ale ma dociagnieta do piwnicy instalacje gazowa, jednak za drogo bylo dla ludzi grzac gazem. Orientujesz sie czy wtedy tez mozna sie zalapac na ten program? Dzieki wymianie pieca na gazowy i termomodernizacji
@KrowkaAtomowka: tego nie wiem... Ja u siebie mialem w domu kocioł gazowy oraz węglowy powiedzmy do okolic 2000 roku, później zlikwidowaliśmy oby dwa, kupiliśmy nowy kocioł węglowy, który po 18 latach został wymieniony na gazowy dziękj dofinansowaniu.
#java #programista15k #cassandra #kafka
czy ktoś z was robił jakieś ciekawe kursy w internecie z Kafki i Cassandry?
Szukam czegoś do nauki oprócz oficjalnej dokumentacji.
Znalazłem teoretycznie odpowiednie kursy na Udemy:
- Kafka Connect
- Apache Cassandra
Może ktoś z was robił coś poza nimi?
czy ktoś z was robił jakieś ciekawe kursy w internecie z Kafki i Cassandry?
Szukam czegoś do nauki oprócz oficjalnej dokumentacji.
Znalazłem teoretycznie odpowiednie kursy na Udemy:
- Kafka Connect
- Apache Cassandra
Może ktoś z was robił coś poza nimi?
@wszystko2bylo: Kursy z DataStax Academy sprawdzałeś?
@wszystko2bylo: Zwłaszcza ten o modelowaniu danych pamiętam, że był ciekawy - a temat jest złożony. Porównując samą długość, to tylko ta część kursu od DataStax trwa dłużej niż cały z udemy - a prowadzi go specjalista.
Jedno z najprostszych realnych zastosowań Apache Kafka: wysyłka emaili.
Sklep internetowy, który potrzebuje wysyłać email o zakupionym towarze. Nie chce sam wysyłać tego emaila, tylko zlecić to innemu mikroserwisowi. Dlatego po zakupieniu towaru przez użytkownika wrzuca tą informację na kolejkę.
-
Komentarz usunięty przez moderatora