Janusz elastica here ( ͡° ͜ʖ ͡°)

Mirki jak ładujecie dane do elastica.
Mam bazę na sql serverze z logami (~15 mln) i chciałbym załadować logi przynajmniej za ostatni miesiąc a następnie ładować je non stop i najlepiej procesem ciągłym (tak aby mi się ładnie cyferki w kibanie zmieniały)

Jak to najlepiej zrobić?. Widzę, że w logstash można podać sql statement ale te logi będą przyrostowe więc gdzie trzymać
  • 6
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Jakieś dobre kursy od aws/gcp itp?

Chce nauczyć się obsługi chmurowej by znaleźć pracę w tym zakresie, bo widzę studia to jest tragedia i na nie kompletnie się nie nadaję.

Oczywiście uczę się matematyki samodzielnie + angielskiego i zaczynam francuski.

znalazłem
  • 9
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

jest jakiś specjalista od kubernetesa? Chce spiąć swoje mikroserwisy za pomocą ingressa tak że uderzam localhost/serwisA/test to zapytanie idzie do serwisA na endpoint testi analogicznie dla innych. Zrobiłem deploya moich apek, poustawiałem ingressa, w minikube aktywowałem dodatek ingresa. Jeśli pinguje adres który pojawia się po wpisaniu

kubectl describe ingress
no to się pinguje, ale jeśli uderzam na ten adres i zdefiniowanego w ingressie endpointa (np. 192.1.1.1/serwisA/test) to mam 404, co pominąłem lub
  • 12
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję kolejne zestawienie o ciekawych artykułach, programach, bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python, ale też #rustlang, #haskell, #wordpress, #pracait czy #produktywnosc

To samo zestawienie u mnie na stronie (lepsze formatowanie) https://devopsiarz.pl/zestawienia/zestawienie-linkow-materialow-01-11-2020

A jeśli chcesz jeszcze dostępu do większej ilości
  • 5
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Wołam 17 osób na podstawie algorytmu: wołanie za plusy dla 2 ostatnich
materiałów lub plusy dla przynajmniej 3 z 6 ostatnich materiałów.

Jeśli plusowałeś/aś tylko 2 ostatnie(-nich) materiały(-ów) - nie plusuj posta
rozpoczynającego ten wątek, aby wyłączyć wołanie przy kolejnych wpisach.

Jeśli
  • Odpowiedz
@19216811: możesz xps 15 lub 17, Lenovo X1E, P51, ew. jakiegoś gamingowca, co da Ci mocne bebechy, ale "słabą" reszte (np. Dell Inspiron), ale średnio to odczujesz, skoro na zewnętrznym pracujesz. Macbooki tylko jeśli chce Ci się uczyć obsługi macOSa
  • Odpowiedz
#programowanie #devops Czy ogarniał ktoś stack Grafana - Grafana Loki - Promtail? Mam przekazywane logi w postaci Timestamp - host - logline. Logline jest zawsze JSONem z mniej więcej taką strukturą:
{
field1: data
field2: data
field3: { field4: data, field5: data }
}
Jak przeparsować w promtailu te logi tak, aby wyciągać labelki z field4 i field5 i nimi się posługiwać w dashboardzie grafany?
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Mamy aplikację zbudowaną z mikroserwisów, gdzie 1 mikroserwis odpowiada za 80% obciążenia serwera. Decydujemy się na zakup kolejnego serwera (skalowanie horyzontalne). Jakie powody stoją, by wrzucić tylko i wyłącznie ten 1 mikroserwis na osobny serwer (przez co request może pójść do 1 z 2), zamiast wrzucić na drugi serwis wszystkie mikroserwisy i skalować również je? W jakich okolicznościach warto skalować 1 mikroserwer dla 1 serwera, zamiast wrzucać wszystkie mikroserwisy na wszystkie serwery?
  • 9
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

skoro serwis od reklamacji nie ma szczególnie dużo ruchu, to nie będzie obciążony, a samo jego istnienie chyba nie zjada szczególnie dużo ruchu.


@Jurix: to trochę wyidealizowane założenie. Zobacz co pisze @Saly

Jak zrobisz skalowanie wertykalne, to prawdopodobnie obie instancje będą miały to samo w cache, przez co
  • Odpowiedz
Czołem komputerowe świry. Mam pytanie, bo chyba jestem trochę głupi w temacie.

Otóż zaistniała potrzeba zakupu sprzętu tylko i wyłącznie na potrzeby postawienia kubernetesa składającego się z 3 nodów. Osobiście mam starego laptopa i nie jestem w stanie postawić tam swojego projektu (kilkanaście mikroserwisów odpowiednie wyskalowanych).

Pytanie jest następujące, co Waszym zdaniem lepiej zakupić z budżetem ok 2000zł: PC czy klaster z czterema raspberry pi 4 8GB RAM?

To
  • 8
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Fora IT, grupy FB, blogi - gdzie są poruszane tematy skalowania dużych aplikacji, obsługa dużego ruchu, zarządzanie i optymalizacja dużych baz danych, wzorce projektowe. Polecacie coś wartego poczytania?

#it #programista15k #devops
  • 5
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

#linux #python #ansible #devops

Jak byscie zautomatyzowali nastepujace problemy

Przychodza nam incydenty w HP Server Manager gdzie czesc nich jest juz nie aktualna lub jest blednie do nas rozsylana. Jest mozliwosc ogarniecia to ansiblem / towerem ? tak aby np co 20-30 min puszczal jakiego playbooka ktory:
bedzie chodzil tylko po naszej kolejce (grupie) i sprawdzal 2-3 przypadki wg jakiegos regexa
  • 18
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

HP server manger


@open-alpha: szukaj REST API dla tego softu, sprawdz czy nie jets przypadkiem na porcie 13951 /SM/9/rest/incidents

lub dokumentację sprawdź, pozniej powinno pojsc gładko
  • Odpowiedz
◢ #unknownews

Dzisiejsze wydanie zestawienia jest sponsorowane przez Maćka Aniserowicza - stąd link numer 4 w zestawieniu. Zgodnie z tradycją, gdy wydanie ma sponsora, wszelkie linki dostępne są bez ograniczeń (nie ma sekcji dla patronów). W ramach podziękowania dla Maćka, kliknijcie mu linka ;)


1) Jak bardzo Twój wygląd odbiega od normy? Sprawdź to w interaktywnym eksperymencie
https://www.hownormalami.eu/
imlmpe - ◢ #unknownews ◣

 Dzisiejsze wydanie zestawienia jest sponsorowane przez Ma...

źródło: comment_1603892489VcoOxp9W3p9lcqEDvHptBU.jpg

Pobierz
  • 9
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

9) Blockchain - niesamowita technologia do... niczego?

https://thecorrespondent.com/655/blockchain-the-amazing-solution-for-almost-nothing/86714927310-8f431cae

INFO: dlaczego technologia ta nie zrewolucjonizowała świata tak, jak zapowiadano? Tekst pokrótce omawia też czym blockchain jest i jak działa.


Zupełnie jednostronny artykuł pisany przez krypto sceptyka, który nie wie skąd bierze się wartość i przytacza argumenty orane od lat, a sam zdecydowanie tematu nie ogarnia, nie polecam.
  • Odpowiedz
konto usunięte via Wykop Mobilny (Android)
  • 0
dobra mirunie jest sprawa bo nie wiem czy ktoś mnie hakuje czy co XD

do rzeczy, zainstalowałem sobie minikube odpaliłem klaster i dokładnie w tym momencie zacząłem mieć użycie 100% dysku, nonstop mielił nawet apki które wrzuciłem się nie uruchamiały, wyłączyłem klaster dalej to samo, reboot kompa w terminalu mieli nie rebootuje się, wyłączyłem przyciskiem, włączam odpalam linucha dysk mieli system nie wstaje, i teraz jak myślicie zemscilo się nie aktualizowanie jajka
  • 5
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

#emigracja #pracait #devops #programowanie

Jaki kierunek emigracji polecacie dla Senior DevOps Engineera/Administrator Linuxow? Inżynier informatyk ( moze to byc istotne jako ze niektore kraje maja system punktwy a wyzsze jest faktorem )- stack to AWS,Linux,Unix,K8S,Openshift,Python + ofc dziesiatki innych narzedzi + skille w pentestingu ( web i *nix-y) .
  • 21
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@wrzesien:

Moge i myslalem nad takim scenariusze ze bede pracowal z Cypru dla firmy z USA/UK ale wole pozbierac opinie ( jesi ktos bedzie tak mily ja wyrazic )
  • Odpowiedz
Treść przeznaczona dla osób powyżej 18 roku życia...
  • 1
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Pod tagiem #devopsiarz (obserwuj lub czarnolistuj) publikuję kolejne zestawienie o ciekawych artykułach, programach, bibliotekach z działki #devops i nie tylko - najczęściej #golang i #python, ale też #rustlang, #haskell, #wordpress, #pracait czy #produktywnosc

To samo zestawienie u mnie na stronie (lepsze formatowanie) https://devopsiarz.pl/zestawienia/zestawienie-linkow-materialow-25-10-2020/

A jeśli chcesz jeszcze dostępu do większej ilości
  • 9
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@devopsiarz: nadal sie nie rozumiemy, tworząc klaster na Digitalu, wybierając klaster najmniejszy jaki sie da, dostajesz mastera w prezencie. Node i tak masz swój. A co do vagranta, to może cofnijmy się do dyskietek. Jak chcesz emulować klaster to tylko na kindzie.
  • Odpowiedz
Node i tak masz swój.


Mam przed sobą info DO: za node płacisz jak za każdą inną instancję, więc "darmowy" masz jedynie master Nodes are built on Droplets. The master node is fully managed by DigitalOcean and included at no cost. Worker nodes are charged at the same rate as Droplets..

W związku z tym, jak chcesz za darmo, to wtedy masz takie all-in-one jak minikube - według mnie cluster w
  • Odpowiedz
Potrzebuję ogarnąć sobie trial do GCP (ten roczny, gdzie oferują 300$) - niestety w przeszłości już raz go aktywowałem i wcale nie wykorzystałem. Orientujecie się czy jest jakaś opcja założyć drugie konto podpinając inną kartę czy lepiej poprosić kogoś innego żeby mi ogarnął triala ?

#kubernetes #gcp #google #devops
  • 10
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach