@B2B_Survivor: Z przyjemnością informuję że od jutra moja współpraca z k---------c dobiega końca i jestem otwarty na ciekawe i inspirujące projekty. Był to naprawdę intensywny i wspaniały czas. Preferuję cały stack technologiczny celuje w stawkę 50-250zł ale jestem otwarty na każdą propozycję przy inspirującym i ground breaking produkcie.
#dataengineering #programowanie gdzie widzicie szanse na zamianę testowania manualnego na data engineering? albo ogólnie jak wbić się na juniorskie pozycje odnośnie data/cloud data? dobre portfolio w modern data stack da radę?
@jonni znajomość kimbala, podstaw DE. Jakąkolwiek pracą z analizą danych, znajomość gita, a może i znajomość databricksa szczególnie że jest fajny free tier. I możesz atakować
@jonni analiza w zależności od firmy analizie nierówna. W jednej firmie będziesz klepał excele. W innej pbi na excelach, w innej pbi na databricksach a w innej analizował kowariancje czy autokorelacje danych. Grunt mieć punkt zaczepienia
@famir96: Cokolwiek sygnowane przez Andre NG na Coursera/deeplearnig.ai
Zacznij od podstaw, od danych, od prostych koncepcji. AI oparte o sieci neuronowe są tylko narzędziem. Najważniejsze są dane i zrozumienie danych.
Tylko przestrzegam, to są długie kursy i trudne. Trzeba myśleć, liczyć i przypomnieć sobie majcę że studiów. Nie licz na schematy, nie będziesz w nich lepszy od llmów.
Inny pomysł to abonament na Gemini i zdobienie sobie samemu kursu... Możesz
Czy ktoś zdawał może certyfikat ze Snowflake - SnowPro Core COF-C02? Jak wygląda egzamin?
1. Czy można mieć jakieś notatki na biurku? 2. Czy przez cały czas ktoś obserwuje na kamerce nasze zachowanie? 3. Ponoć na czas egzaminu jest zablokowana przeglądarka?
@Arogancky: sam z siebie, ogólnie od dawna pracuje w analizie danych, ale nie miałem nigdy okazji pracować na snowflake. Z tego co widzę to coraz więcej ofert wymaga znajomości tego toola, więc robie to trochę pod rekruterów.
Czy ktos mi podpowie czemu scala zostala zepchnieta (przynajmniej z tego co czytam i widze w necie) na drugi plan jako jezyk sparka? Przeciez to jego natywny jezyk?
Tu pytanie do osob siedzacych w Azure i robiacych na nim DE: Czego sie teraz najwiecej uzywa? PySparka? SparkSQL? Jesli tak to dlaczego? W czym piszecie notebooki?
Mirasy moze znacie jakies miejsce w sieci do nauki KQL i PySparka? Potrzebny mi podstawowy poziom. Jakas dobra platforma szkoleniowa? Oczywiscie najlepiej za darmo :D
siema mirasy (i mirabelki) jestem zainteresowany tematem co robicie u siebie na projektach, jakie sa wasze stanowiska, czego uzywacie wiecej lub mniej, za co jestescie odpowiedzialni w swoim zespole
ja obecnie jestem BI Developerem - tworzenie nowych raportow, utrzymywanie starych - wszelkiego rodzaju bugfixing
Macie jakieś kanały, programy, czaty, grupy gdzie mógłbym dołączyć do pogaduszek z technicznymi ludźmi? Bez hejtu, luźne gadanie o IT, chwalenie się fajnym kodem, pomaganie sobie i tym podobne
Lubię swoją robotę (DA, BI) i chętnie pogadałbym o niej z ludźmi z branży a nie tylko z mojej firmy.
Mirasy, jaki był wasz / waszych współpracowników progress w uczeniu się szczególnie SQL/T-SQL w data engineering / data analytics / business intelligence i innych podobnych które SQL wymagają?
Chciałbym po prostu porównać do tego co mam w obecnej firmie jako, że nasz team-lead twierdzi że mamy bardzo szybką ścieżkę uczenia się.
Dla porównania u nas juniorzy w rok uczą się: -wiadomo całe podstawy SQL (joiny, union, selecty, where clause)
Odbicie już jest. Za artykuł nt ai w popularnej gazecie chcieli mi płacić ok. 500z. Obecnie i 5k przejdzie, jak ciekawy temat. Jak zrobić poprawki zdjęć lokalnie w ComfyUI - 3-6k.
Poce na tydzień za 10-40 k USD. Dobry data engineer jest królem. Data w engineer /scientist z
#dataengineering #programowanie #rust #python Czy polecacie się użyć Rusta jako drugiego języka jako DE ? Aktualnie znam Pythona i korci mnie aby zacząć się uczyć Rusta, ponieważ jest przyszłościowy i bardzo wydajny, ktoś korzysta ?
w nawiązaniu do postu https://wykop.pl/wpis/79482415/naukaprogramowania-programowanie-programista15k-sz Wklejam moje przemyślenia i porady. Wyszło tego ok. 12 stron. Jeśli ktoś chciałby doc/pdf proszę o kontakt. Jako wstęp dodałem realny wstęp, który kończy się jakoś po GPT2 czy 3. "Nowe AI " wymaga osobnego dokumentu. Dodałem porady dot. wejścia w ai,
#naukaprogramowania #programowanie #programista15k #sztucznainteligencja #pracait Mała anegdotka. Dużo ludzi pyta: w co teraz iść w it, żeby mieć dobre warunki, sporo ofert pracy i stabilność? I mówię raczej o ludziach z jakimś expem komercyjnym. Odpowiedź (tadam) brzmi: AI i wszelką analizę danych/Big Data/Data Engineering itd. Tak, to prawda. Ale dlaczego? Ilu przecież może być Data Scientistów czy AI Engineerów? Bo to bańka, tak ogromna, jakiej jeszcze nie widziałem na oczy. Może anegdota dobrze zobrazuje, o co mi chodzi. Nowy klient, dla którego robię plan wdrażania AI opartego na LLMach i OpenCV głowił się lata "jak to wdrożyć"? Odpowiedzi teoretycznie są dwie: cloud i on prem. Po długich konsultacjach i podpisanych umowach rozwiązanie będzie on prem. Wszystko stanie w pewnym miejscu w naszym kraju. Wkraczamy w kolejny etap konsultacji, czyli tworzenie zespołu. A właściwie (z mojej perspektywy), tworzenie planu, jak ma wyglądać zespół, żeby to działało. Jakie kompetencje są potrzebne na początku. Bo bądźmy szczerzy. On prem czy on site obecnie, to często coś zupełnie innego niż kilka lat temu. Akurat to on prem, które klient będzie miał, składać się będzie z 7(!) podmiotów dostarczających jakieś elementy całej układanki. By to stworzyć, trzeba sporo ludzi. I nie, nie będą to stanowiska tylko dla Data Scientistów, AI Engineerów czy Researcherów. Klient najpierw ma rekrutować jednego bardzo mocnego gościa od AI, jednego od researchu AI, oni będą sobie dalej rekrutować pod siebie. I tyle w tej kwestii. Równolegle w planie są takie stanowiska, jak m.in: Administrator systemów – wiadomo po co Network Engineer – utrzymuje sieci komputerowe zapewniając łączność i wydajność Database Administrator – zarządzanie bazami danych Virtualization Engineer – konfig i zarządzanie vmkami IT Security Specialist – wiadomo DevOps Engineer – automatyzacja wdrożeń i monitorowania aplikacji łącząc rozwój z operacjami IT (czasem nazwa mlops,aiops itd) Storage Administrator – systemy przechowywania danych Data Center Manager – head data center, rola dla krawaciarza z backgroundem w danych Software Engineer (s) – wstępne oprogramowanie wspierające operacje w centrum danych usprawniając zarządzanie IT (AI) Consultant (s) – doradztwo w różnych obszarach, np ja robie za ai consultanta Wszystkie one jednak muszą być walidowane pod względem AI. Jak jesteś sys adminem to cv do śmieci. Jak jesteś AI sys adminem, to dzwonią xd. Tzn, nie musisz być specjalistą od AI. Musisz wiedzieć po co Twoje stanowisko istnieje w szerszej infrastrukturze AI, jak można je usprawnić dzięki AI i ogólnie jak cały mechanizm działa na poziomie ogólnym. Dobry przykład to devops. Dodajesz komponenty ai-related, zaczynając zarządzać jakąś platformą ai. Modele traktujesz jak apki, ale musisz rozumieć trochę z tego, co się w nich dzieje, by wiedzieć jak je obsługiwać, jakich tooli używać itd. I tak awansujesz. Stajesz się mlopsem. I dostosowujesz się do rynku. Tak samo z każdym innym, wymienionym stanowiskiem. Bazodanowiec używa text-to-sql, admin jakichś paneli stworzonych do analizowania przepływów ai-related jak n8n. Stanowiska ewoluują. I ludzie też muszą. To żadna wielka filozofia. Jest hajp na AI. Trzeba na nim płynąć. Tylko tak da się teraz dalej korzystać z koniunktury. Mam ziomka, który pracuje w RPA. Robił te same workflowy w AA. Aż dostał ciekawy projekt, który jednak wymagał wiedzy z AI. Wepchali go tam, mówiąc, że się nauczy. I okazało się, że nawet nie musiał się wiele uczyć, bo RPA, które tam miał zrobić korzystało z jakiegoś toola, który był prawie identyczny, jak AA, tylko miał pod spodem langchain. I teraz jest AI RPA Devem. AI to teraz morze hajsu. Wszyscy to chcą, wszyscy za to zapłacą, nawet jeśli i tak nie zrozumieją, co dzięki temu zyskują. I z tego trzeba korzystać. Przepraszam, że trochę przydługo. Nie łamcie się. Będzie dobrze.
#dataengineering #datascience #programowanie #programista15k Jak se pomyślę, że ktoś udaje inżyniera od dat, to mnie śmiech bierze. Nyga co ja nie umiem z kalendarza w telefonie korzystać? Narzędzia i technologie? Nyga mi wystarczy kalendarz Google, kalendarz w kuchni i ewentualnie harmonogram na timsie. Gdzie tam niby potrzeba inżyniera?