#datascience

Hej Mirki, tak sobie dlubie proste ETL w #pandas #numpy #python i glowkuje jak tu skrocic czas ladowania trzech duzych (1GB kazdy 900k x 200) CSV. Jedyne co przychodzi mi jeszcze do glowy to dorzucenie multiprocesingu bo duzo sie dzieje, z %pruna widze ze w tej chwili CPU jest waskim gardlem. Probowalem w prymitywny sposob zaladowac to w multi rozrzucajac kazdy plik na osobnyPokaż całość

bawił się ktoś może w robienie customowego monitoringu dla Airflow?
medytuję nad naklepaniem jakiegoś dashboarda który będzie zbierał statusy wykonania DAGów i pokazywał wszystko w jednym miejscu, tylko jeszcze nie wiem czy to sensowny pomysł (bo cuda niewidy pan hindus czasem robi z naszą instancją ) a nie jestem ownerem i nie chce mi się ręcznie klikać ( ͡° ͜ʖ ͡°)
czyli - jaaaaakby ktoś "been there donePokaż całość

Dodaję mirkowpis bo znalezisko nie dostało należytej uwagi, a mam do polecenia fantastyczny link dla wszystkich z #naukaprogramowania #machinelearning. Na https://today.bnomial.com/ codziennie publikowane jest jedno pytanie/historyjka w temacie sztucznej inteligencji/data science i jest to doskonałe uzupełnienie kursów o realne przypadki kiedy z modelem jest coś nie tak - z czego to może wynikać i jak spróbować to naprawić.

#programowanie #datascience #sztucznainteligencja

#programowanie jak wygląda branża #datascience ? R-------a? Dobrze płatna? Z wysokim progiem wejścia? Używa się w niej więcej matematyki?

Jakich pytań z #python mogę się spodziewać na rozmowie technicznej aplikując na mida data engineera? Jestem umówiony na już 2 rozmowy techniczne, na jednej ma być live coding głównie z Pythona i czuję przed nim stres (wiem czego mniej więcej się spodziewać po SQL'u i innych częściach).

Czy mam się spodziewać pytań o algorytmikę? Bo robię sobie zadanka na leetcode i mówiąc szczerze jestem sobą rozczarowany xD

#programista15kPokaż całość

Hey czy ktoś studiował #it lub #datascience na #openuniversity i podzielił by się jak takie studia wyglądają nie mam doświadczenia z distance learning

Czy ktoś przechodził rekrutację w #samsung R&D w Warszawie na stanowisko związane z AI? Dostałem zaproszenie na rozmowę związaną z ofertą praktyk i zastanawia mnie, czy to będzie zadanie algorytmiczne, czy bardziej pytania o Pythona i ML. #programowanie #programista15k #pracbaza #praca #pracait #rd #ai #datascience

Daily reminder, że musicie być w rejestrze, żeby superkomputery z zaawansowanymi algorytmami analizowały wszystko co robicie. Nakierowywać na taki sam tok myślenia żeby być bardziej przewidywalnym, żeby profilować pod was reklamy, opierające się na psychice ludzkiej, waszych potrzebach akceptacji i instynktach. Które są tworzone przez ludzi którzy nawet by tego pewnie nie robili, gdyby nie było to trochę lepiej płatne, bo zostali zaprogramowani od wczesnych lat żeby to robić. I tak sięPokaż całość

Udało mi się wreszcie lepiej zrozumieć jak efektywnie uczyć sieci typu GAN do generowania obrazów, więc postanowiłem podzielić się spostrzeżeniami i może oszczędzić komuś sporo czasu. Jak wiadomo ta architektura jest prawdopodobnie najtrudniejsza do debugowania a proces uczenia długi - no ale właśnie niekoniecznie. Jak się okazuje jednoczasowa propagacja wsteczna dla generatora i obu lossów dyskryminatora jest bardzo nieskuteczna. Lepiej rozbić to uczenie na 3 niezależne części - no ale wtedy czasPokaż całość

Na #dss powtorka z zeszlego roku widzę..
#datascience

Mam w pracy taką analityczkę danych która wiecznie jest zajęta, ale jest skarbnicą wiedzy więc sytuacja mnie zmusza żeby czasem jej dupę zawrócić. Zawsze jak do niej zadzwonię to ona zaczyna "tylko mów szybko o co chodzi" - a jak uzyskam odpowiedź lub przekieruje mnie do innej osoby to nie mogę się z nią rozłączyć, bo coś p------i cały czas. wtf

#pracbaza #it #datascience

Od zawsze dużo programuje. Co prawda w 90% były to sterowniki PLC oraz roboty przemysłowe. Po drodze liznąłem SQL przy różnych projektach. Sam uczę się pythona. Od jakiegoś czasu wujek google spamuje mnie kursem #datascience na #codecademy. Wykupiłem go sobie. Uzupełniam wiedzę o kursy z kaggle.
Jeszcze z pół roku, może rok i będę starał się o pierwszą pracę w tym kierunku. I teraz moje pytanie: będęPokaż całość

Czego można się spodziewać na rozmowie technicznej #datascience na poziomie stażysty lub juniora? Planuję sobie powtórzyć Pythona, SQL, sklearn i TF. Rekrutacja w #capgemini
#programista15k #programowanie #pracbaza #programista #ai

#anonimowemirkowyznania
Mirki chciałbym się przebranżowić ale z głową. Nie mam nic wspólnego z IT. Kiedyś bawiłem się w gimpie i jakieś obróki graficzne. Wiem mniej więcej co można robić w IT ale nie wiem co byłoby ciekawe dla mnie więc.. obecnie pracuje z excelem, różne ilości danych, różne raporty. Podoba mi się wyciąganie danych z nich, tworzeniem formuł, kombinowaniem jak je połączyć, jak znaleźć różnicę, itd. Podobaja mi się teżPokaż całość

Widze te oferty pracy w branzy #it i sie zastanawiam, czy po 10 latach pracy w innej dziedzinie sie nie przebranzowic mam mgr inzyniera uprawnienia, i nie zarabiam nawet zblizonej sumy do pozycji ktorej proponuja stanowisko juniora
dzis widzialem oferte 13-19k dla junior data scientist.

#it #informatyka #datascience #inzynieria #praca #pracait

Mircy potrzebuje pobrac sobie tweety z danym slowem kluczowym/hastagiem z calego 2021 i 2020 roku.

Zalozylem sobie konto deweloperskie na twitterze ale niestety z tego co widze to zwykly darmowy dostep do ich API obejmuje tylko pobieranie tweetow z ostatnich 7 dni. Sa jakies plany premium i ewentualnie dostep uczelniany do celow resaerchowych.

I tutaj moje pytanie, czy ktos moze pobieral masowo tweety i zna jakis w miare dobry i tani sposobPokaż całość

#anonimowemirkowyznania
W accenture widzie że jest ogłoszenie o zdalnej akademii z SQLa. Zakładam że po tym można dostać robotę jako junior DA czy coś w tym stylu. Czy ktoś wie czy przed tą akademią są jakieś testy, test analityczny czy też test z angielskiego? Brał ktoś udział w takiej akademii?
#pracait #pracbaza #analizadaych #datascience #programowanie #korposwiat #accenture

---
KliknijPokaż całość

Jakie stawki wam oferowano na początku w IT? Mam jakąś szansę na staż w #capgemini na pozycji #datascience i zastanawiam się jaką stawkę powiedzieć.
#programista15k #programowanie #pracbaza