Szukam obecnie materiałów do nauki modułów ML w Pythonie (sklearn, Tensorflow). Aspekt teorytyczny jest mile widziany, ale nie jest priorytetem, ponieważ mam od tego przedmiot na uczelni. Zależy mi na tym, aby było dużo praktyki i weryfikacji wiedzy - zadań lub projektów. Zna ktoś może odpowiednie książki/kursy/serie na YT? Osobiście znalazłem ze dwie/trzy sensownie wyglądające serie na youtube oraz dwie książki na PWN Uczenie maszynowe z użyciem Scikit-Learn i TensorFlow oraz Python
Wszystko
Najnowsze
Archiwum
Naukowcy zapisali film w DNA bakterii.
Można go oczywiście z tego DNA odtworzyć. Użyto znanej technologii edycji genów CRISPR–Cas.
z- 2
- #
- #
- #
- #
- #
- #
Dzięki!
@szczepan-szczypawa: Dzięki!
tak sobie czytam o balansowaniu danych i ciągle mi się przewija w tym temacie coś takiego jak metryki, czy jest mi w stanie ktoś wytłumaczyć o co w tym chodzi? dopiero raczkuję w temacie i myślałem, że do zbalansowania danych wystarczy użyć over/under-samplingu i wtedy mamy zrównoważony zbiór? po co stosuje się jakieś metryki potem? podrzucam linka do artykułu: https://metsi.github.io/2020/05/15/kod8.html #informatyka #algorytmy #datascience
Automatyzacja w obszarze Machine Learning dzięki MLOps
W pewnym momencie trwania projektu ML trzeba przejść z eksperymentowania do wdrożenia. Czy takie przejście wykonywane jest tylko raz? Czy możemy automatyzować wdrażanie rozwiązania ML, od danych do wdrożonego rozwiązania? Czym jest MLOps i jak może nam pomóc automatyzować mądrze?
z- 0
- #
- #
- #
- #
- #
- #
#datascience #zarobki #programista15k #korposwiat
Ile zarabia się teraz na midzie jako data scientist z 2-3 doświadczenia w branży w Warszawie. Chodzi mi o korpo typu Big4, banki, eCommerce. Powiedzmy ze w systemie UoP.
Ile zarabia się teraz na midzie jako data scientist z 2-3 doświadczenia w branży w Warszawie. Chodzi mi o korpo typu Big4, banki, eCommerce. Powiedzmy ze w systemie UoP.
Jaki kierunek studiów wybrać: matematykę czy informatykę, jeśli wiążę swoją karierę zawodową z Data Science? Mam wybór pomiędzy studiami informatycznymi na słabszych warszawskich uczelniach typu SGGW czy WAT, a studiami matematycznymi na MiNI PW lub MIMUW. Co mi da lepsze perspektywy w tej branży? Czy lepiej iść na słabszą uczelnię i uczyć się samemu czy starać się na dobrej uczelni? Olimpijczykiem nie jestem, więc też pytanie czy dam sobie radę na tych
konto usunięte via Android
@init5: Studia niczego nie uczą. Bierz informatykę, bo na matmie tylko zmarnujesz czas i będziesz mieć bezużyteczny dyplom okupiony godzinami nauki i wyrzeczeń.
@init5: matematyke. Predzej nauczysz sie kucowac jako matematyk niz kuca matematyki
Informatyka pod wzgledem jakosci to gowniane studia, nic z nich nie wyniesiesz
Informatyka pod wzgledem jakosci to gowniane studia, nic z nich nie wyniesiesz
Czy zostały wykonane kiedykolwiek, badania dotyczące prawdziwości tez astrologii?
No wiecie, to powinno w sumie być sprawdzalne, te tezy. Podaję przykład z brzegu:
Te rzekome ucharakteryzowania poszczególnych psychik sprawiają, że wyszczególnia się dobrze reagujące na siebie pary i źle.
Teoretycznie rzecz biorąc dane znaków zodiaku są wiadome - byłaby możliwość stwierdzenia czy np. wzorce się powtarzają w obiekcie testowym czyli populacji czy takie pary faktycznie się wyłaniają w istotnej liczbie. Czy te wzorce (patterny), się
No wiecie, to powinno w sumie być sprawdzalne, te tezy. Podaję przykład z brzegu:
Te rzekome ucharakteryzowania poszczególnych psychik sprawiają, że wyszczególnia się dobrze reagujące na siebie pary i źle.
Teoretycznie rzecz biorąc dane znaków zodiaku są wiadome - byłaby możliwość stwierdzenia czy np. wzorce się powtarzają w obiekcie testowym czyli populacji czy takie pary faktycznie się wyłaniają w istotnej liczbie. Czy te wzorce (patterny), się
@interpenetrate: tak, była testowana, nie działa: http://www.truthmagazine.com/archives/volume34/GOT034263.html
Znacie jakieś ciekawe czasopisma, blogi czy kanały, na których pojawiają się nowości ze świata #bigdata #machinelearning #datascience ?
@mk321: opowi pewnie chodzilo o cos w stylu towardsdatascience gdzie sa artykuly w stylu DLACZEGO NIE UZYWAC T-TESTU DLA PROB ZALEZNYCH a ty wyskakujesz z tematami o hipergraficznych sieciach neuronowych ( ͡° ͜ʖ ͡°)
@sidsfd: Na twitterze społeczność DS/ML jest bardzo aktywna. Część z nich to autorzy książek, twórcy kursów itd. Ostatnio jest trochę syfu ze względu na wojnę i kilku gości odjechało od tematu, ale polecam kilka profili:
- fchollet
- aureliengeron
- pythonengineer
- omarsar0
- fchollet
- aureliengeron
- pythonengineer
- omarsar0
Jakie dane sobie znaleźć na necie i zestawić ze sobą, żeby sprawdzić gdzie młodzi ludzie mają najłatwiej z zakupem swojej nieruchomości?
Czyli to patrzeć wiek wyprowadzania się z domu? Czy patrzeć który kraj ma największą liczbę wniosków kredytowych bo wtedy jakby są pomiędzy tym że domu się nie da w ogóle kupić a tym że kupują za gotówkę i największą liczba o jak najmniejszym obciążeniu co do zarobków by świadczyła o tym
Czyli to patrzeć wiek wyprowadzania się z domu? Czy patrzeć który kraj ma największą liczbę wniosków kredytowych bo wtedy jakby są pomiędzy tym że domu się nie da w ogóle kupić a tym że kupują za gotówkę i największą liczba o jak najmniejszym obciążeniu co do zarobków by świadczyła o tym
@interpenetrate: Jeżeli chcesz sprawdzić strikte zakup to wyprowadzenie się z domu nie jest żadnym wyznacznikiem. Średnia pensja do średniej ceny na m2 mieszkania może być dobrym kierunkiem + poziom bezrobocia. Liczba wniosków kredytowych tez może być spoko odwołaniem.
Czy te książki są nadal aktualne i można się z nich spokojnie uczyć?
1. Microsoft SQL Server 2016. Analysis Services. Modelowanie tabelaryczne Autor: Russo Marco , Ferrari Alberto
2. Podstawy języka T-SQL. Microsoft SQL Server 2016 i Azure SQL Database Autror: Ben-Gan Itzik
3.
1. Microsoft SQL Server 2016. Analysis Services. Modelowanie tabelaryczne Autor: Russo Marco , Ferrari Alberto
2. Podstawy języka T-SQL. Microsoft SQL Server 2016 i Azure SQL Database Autror: Ben-Gan Itzik
3.
A znacie może coś bardziej aktualnego? :) Chodzi mi o to czy to co jest w tyc książkach może mi się naprawdę przydać jako początkującemu, żebym się nie uczył jakiś starych głupot :D
@FrankLucas92: to jest książka na temat DAX a nie samego PowerBI. Książka jest jak najbardziej aktualna, szczerze polecam.
@Metylo: Tę akurat dostałem, ale odmówiłem, bo okazało się, że jednak miałbym tam robić coś innego, a jednak celuję konkretnie w pracę z BI, analiza danych. Ale miałem w tym tygodniu 3 inne rozmowy i teraz czekam na odpowiedź :D
#anonimowemirkowyznania
Pracuje na co dzień z SQL (T-SQL), oraz trochę z .NET od roku - to moja pierwsza praca.
Myśle nad rozwojem w kierunku #datascience
Warto w to iść? Jak jest z praca tak realnie? Co trzeba faktycznie umieć? Bo widzę pełno Pythona, jakoś SQL rzadko się przewija, z tego co widzę w ofertach. Jakieś porady, warto się w to pchać?
#programista15k chociaż ja jestem #programista7k15kjestdlazarzaduareczku
Pracuje na co dzień z SQL (T-SQL), oraz trochę z .NET od roku - to moja pierwsza praca.
Myśle nad rozwojem w kierunku #datascience
Warto w to iść? Jak jest z praca tak realnie? Co trzeba faktycznie umieć? Bo widzę pełno Pythona, jakoś SQL rzadko się przewija, z tego co widzę w ofertach. Jakieś porady, warto się w to pchać?
#programista15k chociaż ja jestem #programista7k15kjestdlazarzaduareczku
Warto w to iść? Jak jest z praca tak realnie? Co trzeba faktycznie umieć? Bo widzę pełno Pythona, jakoś SQL rzadko się przewija, z tego co widzę w ofertach. Jakieś porady, warto się w to pchać?
@AnonimoweMirkoWyznania: średnio, modna sprawa, dużo chętnych, szybko zmieniająca technologia. Lepiej (koszt wdrożenia do zarobków) idź w stock Azure i chmurowe serwisy do pracy z danymi. Migracje, optymalizacje, procesy ETL/ELT itp. Piszę to jako osoba
@arek-kukla: Chyba był na topie wśród pismaków, którzy tworzyli "listy zawodów na topie". Albo jeżeli przez "na topie" masz na myśli popularność wśród studentów. Przede wszystkim nie możesz przekładać 1:1 sytuacji w USA do sytuacji w Polsce, czy w ogóle w Europie, bo te rynki pracy wyglądają zupełnie inaczej i to nie jest tylko kwestia "paru lat różnicy", tylko po prostu systemowych różnic, u nas np. popularność języków programowania rozkłada
#anonimowemirkowyznania
Czy rynek dla DS i MLE jest rzeczywiście tak biedny, jak sugerują portale z ofertami typu Just Join IT czy No Fluff Jobs? Prawie nic dla juniorów, stawki mega przeciętne w porównaniu z resztą IT, oferty w stylu "minimum 5 lat doświadczenia na podobnym stanowisku, mile widziany doktorat z nauk ścisłych" z widełkami, które może rzucić crudziarz po bootcampie z 4-letnim doświadczeniem. O ile dobrze pamiętam, jeszcze 2 lata
Czy rynek dla DS i MLE jest rzeczywiście tak biedny, jak sugerują portale z ofertami typu Just Join IT czy No Fluff Jobs? Prawie nic dla juniorów, stawki mega przeciętne w porównaniu z resztą IT, oferty w stylu "minimum 5 lat doświadczenia na podobnym stanowisku, mile widziany doktorat z nauk ścisłych" z widełkami, które może rzucić crudziarz po bootcampie z 4-letnim doświadczeniem. O ile dobrze pamiętam, jeszcze 2 lata
@AnonimoweMirkoWyznania: niestety tak to wygląda. ML dostaje pensje juniora zanim się nie nauczy (3-4 lata).
@AnonimoweMirkoWyznania: Wydaję mi się, że firmy nie potrzebują już juniorów DS/MLE. Okazało się, że ML w notebookach to nie jest rozwiązywanie problemów biznesowych tylko zabawa. Co więcej, koszty zespołu DS rosną wykładniczo, wraz ze skomplikowaniem projektu. Nie wyobrażam sobie dać juniorowi zadanie do przygotowania modelu pod trening, który może kosztować nawet kilka tysięcy $. To samo tyczy się przygotowania danych, analizy, rozmowy z klientem i tak dalej.
Problem moim zdaniem jest
Problem moim zdaniem jest
Treść przeznaczona dla osób powyżej 18 roku życia...
@Popcornn1: a czy można z licencjatem iść na podyplomowe? jeżeli tak, to zamiast się męczyć na jakimś zarządzaniu, zrobiłbyś coś np. ze statystyki (jeżeli chodzi o AI czy ML to pewnie studia w PL nie nadążają z programem, na kursach w necie znajdziesz świeższy kontent)
@heniek_8: na cześć podyplomówek wystarczy licencjat
Czy jak normalizuje feature w traning set to czy muszę też znormalizować ten feature w secie, który służy do predykcji?
#uczeniemaszynowe #machinelearning #datascience #sztucznainteligencja
#uczeniemaszynowe #machinelearning #datascience #sztucznainteligencja
Zapraszamy na krótki przegląd ofert z kategorii #datascience i #dataengineering, dla chętnych na przeprowadzkę do #szwajcaria lub #niemcy ( ͡º ͜ʖ͡º)
(SwissDevJobs.ch | LinkedIn | Twitter | Facebook)
(GermanTechJobs.de | LinkedIn | Twitter |
(SwissDevJobs.ch | LinkedIn | Twitter | Facebook)
(GermanTechJobs.de | LinkedIn | Twitter |
źródło: comment_1646820592QwqQ6VLD4OTjBYP507yOdP.jpg
Pobierz@SwissDevJobs: Mam tak właśnie od dwóch tygodni, że ani w domu, ani w pracy nie programuję. Właściwie dzięki wojnie jestem chwilowo bezrobotny. Czuję już, że wyparuje mi z głowy trochę wiedzy
Hej. Czy do zostania data analyst potrzebna jest mega mega zaawansowana matma i bez studiow ani rusz czy jednak mozna zrobic kurs ktory trwa prawie rok i znalezc prace w tej dziedzinie?
#datascience #dataanalysis #matematyka
#datascience #dataanalysis #matematyka
@Mordechai: w studiach matematycznych nie chodzi tyle o wiedzę czy konkretne zaawansowane metody co sposób myślenia, u mnie w firmie jest sporo osób nie po matmie (itp) i spokojnie dają sobie radę, ale Ci po matmie itp zdecydowanie odstają i szybciej awansują/dochodzą na wyżej w ścieżce kariery
@Mordechai: wal studia, no chyba ze jeszcze przy okazji chcesz zalapac kontakty czy cos. Dla myślącego pracodawcy liczy sie czy wprowadzasz jakis impact dla jego biznesu, masz potencjał rozwojowy.
Jesli pokazesz swoje projekty i dobrze je udokumentujesz, pokazesz ze wiesz co robisz to nie bedziesz mial problemu, no ale jak twoim glownym celem sa pieniadze to watpie czy bedziesz mial motywacje bo nauki jest duzo
Jesli pokazesz swoje projekty i dobrze je udokumentujesz, pokazesz ze wiesz co robisz to nie bedziesz mial problemu, no ale jak twoim glownym celem sa pieniadze to watpie czy bedziesz mial motywacje bo nauki jest duzo
Potrzebuje opinii kogoś bardziej doświadczonego jeśli chodzi o radzenie sobie z imbalanced data. Regresja logistyczna. Mam zbiór danych z 4000 wierszy (przed podziałem train test split) i w tym zbiorze jest tylko 16% wartości 1 wiec zbiór danych jest niezbalansowany. I tutaj mam pewne wątpliwości:
1.Czy metody SMOTE używamy przed podziałem zbioru na treningowy i testowy?
2.Co w przypadku gdy po upsamplingu SMOTE (zrobionym na zbiorze testowym) otrzymujemy dla modeli niższe accuracy niż bez
1.Czy metody SMOTE używamy przed podziałem zbioru na treningowy i testowy?
2.Co w przypadku gdy po upsamplingu SMOTE (zrobionym na zbiorze testowym) otrzymujemy dla modeli niższe accuracy niż bez
Najpierw split, potem SMOTE
https://kiwidamien.github.io/how-to-do-cross-validation-when-upsampling-data.html
@srutownik:
https://kiwidamien.github.io/how-to-do-cross-validation-when-upsampling-data.html
@srutownik:
@srutownik: Zacznij od porządnej analizy danych a później weź sie za algorytmy klasyfikacji. Jeśli stwierdzisz w trakcie analizy, że dane są mało spójne tzn. posiadają dużo szum to musisz go usunąć i dopiero później stwiedzić czy potrzebujesz metod rozszerzania danych.
#machinelearning #deeplearning #webscraping #datascience #prawo
Mirki, czy wiecie jak obecnie w Polsce wygląda dokładnie prawo autorskie w kontekście gromadzenia treści na potrzeby naukowe? Mam konkretnie na myśli czy tworząc bazę danych obrazów (i ją nieodpłatnie udostępniając) w celu przetrenowania sieci nie łamię prawa? Czy na potrzeby akademickie jest to legalne? Co jeżeli bym gromadził zdjęcia z wyszukiwarek? Badał ktoś ostatnio taką kwestię?
Mirki, czy wiecie jak obecnie w Polsce wygląda dokładnie prawo autorskie w kontekście gromadzenia treści na potrzeby naukowe? Mam konkretnie na myśli czy tworząc bazę danych obrazów (i ją nieodpłatnie udostępniając) w celu przetrenowania sieci nie łamię prawa? Czy na potrzeby akademickie jest to legalne? Co jeżeli bym gromadził zdjęcia z wyszukiwarek? Badał ktoś ostatnio taką kwestię?
Mirki, polecicie jakiś kanał/książkę o wizualizacji danych dla laika?
#it #datascience #pytaniedoeksperta
#it #datascience #pytaniedoeksperta
@odrzutowakuchenka: taktyk
@odrzutowakuchenka: Dziękuje za polecenia. Zamówiłam sobie Storytelling. Ale na ten show me the numbers też mam chrapkę - ale faktycznie, już dwie stówki trzeba wyłożyć. Zapisze sobie jako pomysł dla mnie ode mnie na prezent. ( ͡° ͜ʖ ͡°)
#it #sql #datascience #dataengineering #datascience