@dev_null__: Mógłbyś zaciągnąć cały HTML i potem lokalne pliki crawlować np. Puppeteerem, ale jak dla mnie to jest ta sama robota co napisanie prostego crawlera do każdego serwisu i zaciąganie od razu przetransformowanych danych do użytku np. w Sheets.

Edit: W zależności od tego jak dużo tych danych potrzebujesz - zastanów się, bo prosty crawler możesz nawet w Apps Scripts napisać i będzie Ci zaciągał dane bezpośrednio do Google Sheets.
  • Odpowiedz
✨️ Obserwuj #mirkoanonim
Poprzednia ankieta się przyjęła, to robię jeszcze jedną (obiecuje, że już ostatnia). Jeśli jest ktoś analitykiem danych to łatwiej mu będzie dostać pracę jako Data Scientist czy Data Engineer? Oczywiście po rozszerzeniu stacku.
#programowanie #programista15k #programowanieit #bigdata #data #datascience

Analityk danych łatwiej będzie miał dostać pracę jako

  • Data Scientist 51.8% (43)
  • Data Engineer 48.2% (40)

Oddanych głosów: 83

  • 2
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

Zajmowałem się i tym i tym, i powiedziałbym że jako data engineer jest łatwiej o pracę, bo jest większy popyt ze strony pracodawców - data engineering robi się po prostu prawie wszędzie, a data science jednak nie wszędzie, plus zespoły są zwykle mniejsze.


@Tasartico7: I bariery wejścia są dużo większe, bo trzeba umieć w programowanie, systemy rozproszone, bazy danych, architekturę, co najmniej Sparka, poza tym ciężko o stanowiska juniorskie, w
  • Odpowiedz
✨️ Obserwuj #mirkoanonim
Którą ścieżkę obecnie byś wybrał? Pod uwagę bierzemy work&life balance, perspektywa zarobków, łatwość znalezienia pracy na obecnym rynku, ciekawsze rzeczy, ilość stresu w pracy, próg wejścia
#programowanie #programista15k #bigdata #data #datascience #programowanieit

Co obecnie byś wybrał?

  • Data Scientist 43.9% (43)
  • Data Engineer 56.1% (55)

Oddanych głosów: 98

  • 17
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

DS ma większą perspektywe zarobków i większy próg wejscia, reszta pytania

Pod uwagę bierzemy work&life balance, łatwość znalezienia pracy na obecnym rynku, ciekawsze rzeczy, ilość stresu w pracy


@mirko_anonim: nie ma sensu, bo to nie zależy od ścieżki tylko od projektu, firmy, ASERTYWNOŚCI i farta
  • Odpowiedz
via mirko.proBOT
  • 2
Anonim (nie OP): Zdecydowanie data engineer, kolegom u gory sie chyba pomylili data scientists z AI engineerami, dodam ze data engineerowie maja spory prog wejscia i bardzo malo jest typowo juniorskich pozycji (wiekszosc jakich znam zaczynala od czegos innego, bardzo czesto zwykla analiza danych)


· Akcje: Odpowiedz anonimowo · Więcej
  • Odpowiedz
✨️ Obserwuj #mirkoanonim
Jakiego języka warto się uczyć żeby wyjechać na #emigracja z tego grajdołka i pracować jako Business Analyst?
Zawsze podobały mi się języki germańskie i skandynawskie. Niemcy/Holandia chyba dobre kierunki? a może Francja lub jakaś Norwegia? Jest tam praca i spoko się żyje?


mirko_anonim - ✨️ Obserwuj #mirkoanonim
Jakiego języka warto się uczyć żeby wyjechać ...

źródło: 4c111e99fb8c92211c5b1211e35353476d44d8ef_work-in-the-netherlands-1-resized

Pobierz
  • 8
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@mirko_anonim: zobacz jaki kraj Cię interesuje, poprzeglądaj na LinkedIn jakie języki wymagają i działaj. Nie ma uniwersalnej recepty.

W krajach niemieckojęzycznych raczej bez niemieckiego ani rusz. Podobnie we Francji czy we Włoszech, ani rusz bez języka urzędowego.

Wyłącznie z angielskim da się, nie jest to wykluczone, ale będzie znacznie mniej ofert, wyłącznie z międzynarodowych korporacji.

Mieszkam w WKL, gdzie jest duży miks narodowości i z samym angielskim da się normalnie
  • Odpowiedz
@mirasKo-Kalwario: Jako ludzie z branży, jakiś czas temu, ogólnie komentowaliśmy i śmieszkiwaliśmy z ekstremalnie niskiego poziomu materiałów (np. słynna road mapa :D ) i umiejętności prezentowaną przez tą Panią, oraz nieetycznych praktyk, takich jak wykorzystywanie grupy o tematyce danej technologii do chamskiego i natarczywego reklamowania swoich kursów/nowej społeczności, co mocno przypominało scam i było niezgodnej z jej własnym regulaminem. W swoich ogólno-dostępnych materiałach głównie nagabywała na bycie analitykiem, opowiadając jakie
  • Odpowiedz
Dopiero zaczynam z bazami danych, dostałem gotowe zapytanie od analityka. Ale chciałbym się dowiedzieć skąd on wie że akurat tam to leży? Chciałbym się rozeznać bardziej w bazie danych co muszę zrobić na początek? Chce poznać listę wszystkich tabelek. A jakbym chciał ręcznie sprawdzić bazę danych? To wchodzę w widoki lub tabele czyli ten object browser i przeklikuje wszystko?

#sql #pracait #programowanie #programista15k #
  • 8
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

wraz ze wzrostem algorytmów sztucznej inteligencji będzie większe ssanie na specjalistów na rynku bo po prostu trzeba to wszystko po kodować i taka prawda

Odpowiedz


@paczelok: zgodzę się, ale będzie ssanie na specjalistów AI, a nie analizy danych.
  • Odpowiedz
Szukam pomysłu na prace inzynierską.

Moje propozycje:
* coś dla linuxa; może jakiś program do synchronizacji danych p2p lokalnie i w Internecie (połączyłbym jakoś p2panda i system DNS)? Docelowo żeby kończyć prace na jednym urządzeniu i zaczynać na drugim; coś jak apple;
* standardowo: apka mobilna i prezentacja danych z czujników
* lub mój hit: coś pod data science (pod przyszłą pracę): umiem niewiele (3 przedmioty na studiach o tym); ale szybko się uczę ( ͡° ͜
  • 18
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@pyroxar: zintegruj chatgpt api z konsolą linuxa i dobrym prompt do chatgpt ai, aby nie pisał tłumaczenia co robi a same komendy które będą wykonywać się w terminalu Linuxa i aby można było powiedzieć do niego: "napisz mi prosty kalkulator" a on wiedzac ze ma dostęp do terminala to uczyni. Proste i efektowne. Tego linuxa można zawrzeć w dockerze lub osobnym użytkowniku aby chatgpt wykonując komendy czegoś nie s--------ł. wyniki
  • Odpowiedz
tester oprogramowania


@interpenetrate: IMO ma bardzo długą przyszłość, o ile może programiści się zredukują przez AI, o tyle testerzy wciąż będą musieli weryfikować bzdury wypluwane przez AI. Problem w tym że działka testerów jest mocno okupowana przez wannabe IT, jako ten prostszy wariant do wejścia w IT, teraz się przebić przez setki innych CV na testera to dramat.
  • Odpowiedz
planuję w przyszłości przebranżowić się z finanse do IT (data science i okolice) i przymierzam się do zrobienia projektu do porfolio. Z racji mojego obecnego zawodu i wykształcenia projekt ten będzie aplikacją webową w #python opierającą się na danych finansowych, a konkretnie na danych konkretnych spółek: ohlc, volumne, dane ze sprawozdań finansowych itd. Chciałbym, żeby projekt był jak najbardziej atrakcyjny dla przyszłego pracodawcy więc chętnie przyjmę jakieś rady odnośnie tego
Oake - planuję w przyszłości przebranżowić się z finanse do IT (data science i okolic...

źródło: data-science-in-finance

Pobierz
  • 5
  • Odpowiedz
  • Otrzymuj powiadomienia
    o nowych komentarzach

@Oake: jedna kwestia to co zrobisz a druga jak to pokażesz/wytłumaczysz. Data science pod korpo I bi to raczej storytelling dlatego możliwe że lepiej będzie zrobić dashboard + jakiś wpis na blogu co i gdzie znalazłeś. Bo niby po co mi średnia krocząca? Mam ja na wykresie w każdej aplikacji, tylko co ona znaczy i jak ją rozumieć w kontekście uwarunkowań (okej średnia to trochę mało). Może sprawdź rozdziały tej
  • Odpowiedz