[M.....w]

#kaggle Hej, jestem nowy w temacie ML i chciałbym się czegoś jeszcze poduczyć. Dotarłem do problemu sądzę dość typowego pt. nie mam dobrej karty graficznej i nauka sieci trwa 2h na jeden epoch. Szukam rozwiązań chmurowych, znalazłem opcję, że na Kaggle mogę to zdalnie odpalać mój kod.
Czy jest opcja przeniesienia jakoś tego, co mam lokalnie na kompie bezpośrednio na kaggle, wpisania tam typowej komendy python3 train.py --path /path/?
Bo póki co znalazłem opcję pisania tam bezpośrednio (co nie jest tragiczne, najwyżej kod skopiuję), ale z tymi parametrami trochę trudno ( ͡° ʖ̯ ͡°)

#machinelearning #python

[mrocznapszczola]

@Mpknw: na kaggle jest chyba 6 godzin GPU, później maszyna się resetuje. To sam jest na google colab. Nie rozumiem tylko jakie Ty parametry chcesz kopiować?

[M.....w]

Hmm, to tam mogę jakoś przekazać, że najpierw zrób jedno z jednego pliku (dekodowanie mapy pikseli na Bounding Boxy), a później przekazać wynik i działać na kolejnym pliku? Jak patrzę na zakładkę "Kernels" tylko na jednym pliku naraz mogę działać :(

[arysto2011]

@Mpknw: Kazdy z dostawcow chmurowych oferuje jakies freebie. AWS, GCP, AZURE. NIektore ograniczone sprzetowo (1 CPU, 1 GPU, malo RAM), inne kwotowo (GCP ma 300$ max). Sprawdz dostepne opcje i odpal w chmurze.

[skrzacik320]

@Mpknw: Jeśli pytanie jest jeszcze aktualne to spróbuj Google Colab. Za darmo dostęp do GPU (i to chyba jakiegoś całkiem dobrego) albo TPU (układ od google do obliczeń deep learning). Musisz tylko mieć konto google czy tam gmail.

[M.....w]

@skrzacik320: przerzuciłem się na Colab, wygląda nieźle, ale nie wiem po jakim czasie się sesja resetuje i wszystkie moje pliki idą w piach :( póki co majstruję z trialem od Google Cloud

[skrzacik320]

@Mpknw: Nie wiem czy jest ustalony jakiś czas, pewnie zależy od obciążenia serwerów. Ale wystarczy zapisywać co epoch na Google Drive https://colab.research.google.com/notebooks/io.ipynb#scrollTo=u22w3BFiOveA