Jak oceniacie rynek #snowflake w Polsce? Mam opcję certyfikowania się ze Snowflake'a u siebie w firmie i zastanawiam się, czy brnąć w to dalej, jak zrobię sobie podstawowy certyfikat. Bardzo mi się podoba póki co, ale zastanawiam się czy jest sens się specjalizować z jednego konkretnego data platform.
#programista15k #dataengineering #businessintelligence #pracait
E.....e - Jak oceniacie rynek #snowflake w Polsce? Mam opcję certyfikowania się ze Sn...

źródło: comment_1671400048GKrkL0zaERFgoqshDIFC9C.jpg

Pobierz
  • 5
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@ElMatadore: Po co CI rynek Snowflake w Polsce? Data Science i Data Engineering to rynki globalne. Możesz sobie mieszkac w Polsce, ale pracy to szukaj raczej za granicą. To tam jest większość RnD i zastosowań BigData.
  • Odpowiedz
@ElMatadore: ja bym w to szedł, jeśli bym miał możliwość pracy w tym. Koniec koncow i tak na projekcie musisz wybrac jeden konkretny data platform, obojetnie czy to bedzie synapse, databricks, czy moze snowflake. Wszystko dziala na podobnej zasadzie, wiec na pewno lepiej jest miec doswiadczenie w przynajmniej jednym, niz zadnym.

Co do samego snowflake, to tez ostatnio widze hype na to, zarowno w sieci, jak i u klientow. Moja
  • Odpowiedz
Jak myślicie, czy trend i popularność w obszarze analizy danych zmienia się z #datascience na #dataengineering? Pracuję jako datascientist już trochę lat i wiem jak to wygląda od podszewki, i widzę że większość firm nie ma odpowiednich danych/nie wie co chce z nimi zrobić. Plus firmy chcą się chwalić że robią SI.

Wydaje mi się też, że ofert pracy jest trochę mniej niż np rok-dwa lata temu.
  • 4
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@JamesJoyce: ja pracuje w firmie która robi i DS i BI i tego drugiego sprzedaje się 10x więcej. Data science to buzzword, kręci zarządy i odblokowuje duże budżety ale nic po tym gdy menago w firmie nie wie ile wczoraj sprzedał, ile ma zysku albo ile na stocku. Albo gdy musi czekać aż ktoś mu ręcznie taki raport w excelu zrobi.
  • Odpowiedz
Siemka mireczki, jestem mid developerem w #businessintelligence. Zajmowałem się naprawdę różnymi rzeczami, zaczynając od PowerBI i DAX, po Data Engineering w AWS i Azure z Pythonem, zrobiłem też certa z Data Science, bo firma potrzebowała dodatkowej osoby z certyfikatem żeby coś tam uzyskać od MS.
Ogólnie dość sporo się uczę różnych rzeczy, ale mam wrażenie że przez to na niczym się porządnie nie znam ( ͡° ͜ʖ
  • 12
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Jeżeli mielibyście wybrać ścieżkę rozwoju #dataanalyst #dataengineering w chmurze to lepiej #azure czy #gcp? Pracuje w dużej firmie #bigdata, wszystkie certyfikaty są sponsorowane przez firmę, ale nie chce się uczyć dwóch technologii jednocześnie i chciałbym się określić. Technologia zależy głównie od projektu, większą wiedzę mam obecnie z GCP.

Z certow mam
AZ-900
DP-900
Google
  • 3
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Chciałbym zamiast BI/ETL developerem, zostać Data Engineerem. Czego powinienem się uczyć?

Co umiem:
-SQL, T-SQL
-ETL toole (Azure Data Factory, SSIS i inne)
-Raportowanie: Power BI, Excel, Tableau, Reporting Services
  • 9
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@przecietnyczlowiek: Moim zdaniem Linux - tj. ogólna znalomość systemów unixowych tak, aby dostać dostęp przez SSH do czegoś, i nie panikować kiedy trzeba wykonać kilka komend, coś przepajpować i następnie posłać wyniki do SQLowej (lub nie) bazy danych.

Aktualnie sam szukam kogoś kto nadaje się do tematów bazodanowych. Coś pomiędzy Data Engineer a Business Analyst. W każdym razie, stack większości zintegrowanych u mnie systemów jest mocno linuksowy, i taki pozostanie.
  • Odpowiedz
Czolem #bigdata #dataengineering
Znacie jakieś pozycje książkowe/serię artykułów, które są biblią bigdata? Chodzi mi o wysoko poziomową prezentacje tematu, rodzaj wstępu zawierający może ogólne pojęcia tj data lake, etl, może ogólne przedstawienie narzedzi. Chciałbym zacząć iść w tą stronę, więc chce sprawdzić i podbudować swoje zrozumienie tematu
Dzięki z góry
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@jedrek1212 niekoniecznie musisz znać NL żeby się zatrudnić. Profesjonalny ENG w zupełności wystarczy.
Dam ci zabawny przykład, tydzień temu znajomy pomagał Ukraince meldować się w gminie jako uchodźca, było to w czwartek, gmina mała, kiedy poznali jej zawód z miejsca zaproponowali jej pracę ktora zaczęła w poniedziałek. Pracowała w Kijowie dla firmy IT, tu w Belgii poniżej jej możliwości ale na początek nie ma co marudzić bo gmina w pakiecie dorzuciła
  • Odpowiedz
poleca ktoś jakiś kurs/ćwiczenia gdzie można się podszkolić w operacjach na tabelach typu dataframe? chodzi mi o nabranie wprawy w joinach, groupby i innych transformacjach. Fajnie by bylo poznać jakieś zaawansowane techniki itp itd.

#python #pandas #numpy #dataengineering
  • 2
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

#anonimowemirkowyznania
Mireczki, Od 3 lat pracuje jako analityk danych i teraz chciałbym spróbować swoich sił bardziej jako data engineer. Coś tam umiem w Pythonie, coś tam w SQL, technologie jakie się używa też mi są mniej więcej znane bo pracuje w podobnym obszarze. Ogólnie myśle, że na juniora bym się mógł gdzieś załapać. No i tutaj pojawia się pytanie jak efektywnie szukać pracy? Ogłoszeń na juniora jest w sumie dosyć
  • 2
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Boje się trochę spalonych mostów, że jak gdzieś się teraz nie załapie bo po prostu jestem za słaby to w przyszłości dla tej firmy, nawet na inne stanowisko będę już spalony, nie wiem w sumie jak to wygląda od strony #rekrutacja


@AnonimoweMirkoWyznania: Nie wiem jak to działa w DS, ale w programowaniu po prostu jest okres karencji po oblaniu rekrutacji (z reguły 1 rok) i tyle.
  • Odpowiedz
tldr: szukam tutoriala do Kafki, który będzie długi, możliwie nie kosztował 800zł za całość (jak jakiś kurs na udemy) i nie będzie zawierał łamanego angielskiego hindusa.

Hej, szukałem i nic sensownego nie znalazłem. Ma ktoś może do polecenia jakiś ciekawy kurs, który dosyć dokładnie wytłumaczy (pewnie z 8h+) Kafkę? Aktualnie w robo piszę głównie pipeliny, które korzystają z danych aktualizowanych max. raz dziennie, ew. codzienny webscraping, a do schedulowania używany jest Airflow,
  • 7
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

W pracy mam projekt gdzie pracujemy na Hadoop, Hive, Apache NiFi, Pysparku i Tableau. Mam pewien task do zrobienia: odpalać shellowy skrypt jeżeli tabela w bazie danych zostanie zaktualizowana. Jest jakiś processor w nifi który nasłuchuje i sprawdza czy wpadły nowe rekordy do tabeli? Nie wiem jak to zrobić, nie chce odpalać zapytania sql co minutę i sprawdzać ilość rekordów. Czy jest coś lepszego co mogę użyć?

#programowanie #bigdata
  • 3
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach