Uczę się data science i ML. Spotkałem się z czymś, czego nie do końca rozumiem. Do tej pory poprzez traintestsplit dzieliłem sobie zbiór na 2 grupy, wiadomo. Z kolei w jednej książce spotkałem się z pomysłem, aby dzielić nie na 2, ale na 3 grupy. Ta 3 miałaby być walidacyjną i miałaby służyć porównaniu z tą testową. Nie lepiej zrobić sobie pętlę z powiedzmy
@IsambardKingdomBrunel: Generalnie można myśleć o tym tak, że train/validation pochodzi ze zbioru uczącego a zbiór testowy to jest to co siedzi na produkcji. Poczytaj sobie jeszcze o k-fold cross-validation.
@IsambardKingdomBrunel: Przykładowo: trenujesz model na trainining secie, tuningujesz hiperparametry żeby zmaksymalizować wynik na zbiorze walidacyjnym. Potem sprawdzasz wyniki na testowym. Generalnie chodzi o to, że trening odbywa się bez żadnego udziału zbioru testowego.
Xenoblade chronicles się zastanawiam czy kupić ale odtrąca mnie trochę cena tego z dlc. Teraz jest promo i szukam czegoś z fabułą do pogrania a nie tylko wiecznie roguelike i platformersy. Jak kupować to od razu xenoblades i dlc? Czy dlc dopiero się aktywuje po przejściu gry. Co daje dlc czy dużo contentu. I boje się że mechanika walki mi się nie spodoba do czegoś byście ja porównali. #xenobladechronicles2 #
@Sonia_Zwierzynska: system walki otwiera się generalnie bardzo późno i może minąć dużo czasu zanim Ci „kliknie”. Ale jak dla mnie jest zajebisty jak już ogarniesz. Trudny jest bo dużo rzeczy na raz trzeba ogarniać.
Standardowy proces w pisaniu aplikacji, która korzysta z machine learningu, to: 1. Mamy zbiór danych treningowych/testowych i uczymy model. 2. W aplikacji korzystamy z gotowej wytrenowanej sieci, żeby przetwarzać nowe dane. Tak widzę w tutorialach i tak w najłatwiejszych użyciach, gdzie ML jest używane w rzeczywistych systemach.
@mk321: Szukasz czegoś co się nazywa transfer learning, ładujesz starą sieć i douczasz na nowych danych. Jeżeli chodzi o inne algorytmy np. GBT to trzeba uczyć od zera dorzucając dane.
@mk321: A jaki masz typ problemu? Dane w tabelce? Obrazki? Tekst? Jak tabelka to możesz uczyć od nowa. My często robimy tak, że odświeżamy model co 3 miesiące/pół roku ale mamy raczej duży system (w tej chwili 80+ modeli) - częściej nie ma raczej sensu.
A co do GBT - nie ma to raczej sensu, bo douczanie polegałoby na dodaniu nowych drzew i miałbyś gigantyczny overfitting po jakimś czasie.
@mk321: Czyli jednak transfer learning, w przypadku jak masz jeszcze mało danych to warto uczyć od początku. Po prostu bierzesz starą sieć i douczasz na tym samym/trochę mniejszym learning rate - możesz sobie zrobić taki automatyczny proces, który doucza sieć na produkcji, zapisuje i porównuje przed i po z jakimś wcześniej wydzielonym zbiorem testowym (jeżeli to problem, w którym można go dobrze zdefiniować i zadać jakąś metrykę wyboru).
Co możecie powiedzieć o wykonaniu #nintendoswitch? Zastanawiam się nad zakupem. Recenzenci na YT mówią, że taka tandeta, że po 2 miesiącach odłamuje się plastik w różnych miejscach, psują się zatrzaski joyconów i jest odczucie podobne jakby się trzymało te pady od współczesnych podróbek NESa. Zgadzacie się z tym? #pytanie #nintendo #switch
Elo Mirki, pracuje ktoś jako big data engineer? Łatwo się przekwalifikować z Data Scientista? Mam doświadczenie głównie w developmencie w Sparku, ale raczej Python, ok. 2 lata. W jakich językach piszecie? Dominuje Scala czy raczej Java? Jak wyglądają codzienne zadania? #hadoop #bigdata #datascience #programowanie
Drogie Wykopki. Powiedzcie mi co sądzicie i jak to jest od strony prawnej a może ktoś z was wynajmował mieszkanie rodzicom z dziećmi. Zawsze się trochę bałam tego, jednak do tej pory udawało mi się ominąć sprawę... Jednak teraz odzywa się dużą ilość osób z dziećmi, już nie mówiąc o sąsiadach ze wschodu. #wynajem #mieszkanie #wroclaw
Mirki, taka oto sytuacja za 170 tys. - https://imgur.com/a/wXPa0Y9 3. piętro, 44m2, lokalizacja w bloku przy Gołębiej (Widzew Dołek). Nie ma zdjęć łazienki, ale standardowa bez fajerwerków. Martwi mnie 3. piętro w bloku bez windy oraz rozkład mieszkania - chciałbym dwupokojowe, ale nie z przechodnim pokojem. Wzięlibyście? #mieszkanie #lodz #pytanie
Hej mirki, mam pytanie do was. Jest mieszkanie na spółdzielczych prawach własnościowych które chce sprzedać. Czy jest sens wyrabiania księgi wieczystej do tego? Tak?Nie? Dlaczego?
@ahaw: Na założenie KW będziesz czekał w zależności od miasta nawet 6 miesięcy. Ja teraz kupowałem mieszkanie i wolałem sam sobie założyć po sprzedaży u notariusza niż czekać tyle czasu aż właściciel się tym zajmie.
Elo Mirki, potrzebuję jutro przewieźć rzeczy z jednego mieszkania do drugiego. Chciałbym zamówić większą taksówkę + ~pół godziny postoju. Gdzie będzie najtaniej/najlepiej? Na terenie #warszawa. #taxi #uber #taxify #mytaxi
@DobryZiomek No tak, dawać ukraińcowi 3 dychy za czekanie xD każde taxi weźmie taki kurs jak fuche. I po polsku się chociaż dogadasz A nie w Farsi. @haka65
Elo Mirki, Muszę kupić biurko/stół i krzesło. Zależy mi na salonie meblowym, w którym będzie transport+wniesienie+montaż, i najlepiej jezeli dostawa nie zajmie 3 tygodnie jak w BRW. Polecacie coś? Na terenie #warszawa #meble #dom
Elo Mirki, niedługo będę sie przeprowadzał do nowego mieszkania. Wydaje mi się, że nie mam w nim okablowania do UPC, ale dostępność jest. Monter bez problemu doprowadzi kable do mieszkania? #upc
Mam pytanie odnośnie brania kredytu hipotecznego. Kredyt o wysokości 200.000zł, 20 lat, wkład własny ~17%.
Mam na oku mieszkanie własnościowe spółdzielcze bez założonej KW, bez zaległości finansowych itp., 40m2. Grunt pod budynkiem jest pełną, nieobciążoną własnością spółdzielni, jednak w najbliższych paru latach nie ma możliwości przekształcenia mieszkania na w pełni własność. Samą KW można założyć bez problemu (informacja ze strony spółdzielni). Pytanie z mojej strony jest takie - czy w każdym banku będę miał
@maciekawski: Doradca powiedział mi dokładnie to samo, tzn., że nie lubią mieszkań własnościowych. Dodatkowo wspomniał, że nie są w stanie przebić oferty PKO.
Żałuję, że wcześniej sobie homebrew aplikacji nie zainstalowałem.
#nintendoswitch
źródło: comment_BxjluKn48FmrveBXnYUas5FNaB9rkb13.jpg
Pobierz