[tptak]

@tptak: Jutro AWS Summit. Wydaje mi się, że zrobiłem co mogłem, aby się przygotować i mimo że jest sporo losowości w moich wynikach pracy i wielu rzeczy jeszcze nie rozumiem, jestem na dobrej drodze.

https://codelikeamother.uk/planning-a-training

Biorąc pod uwagę, ile zdołałem zrobić w dwa tygodnie, muszę się zgodzić że DeepRacer jest świetnym pomysłem na promowanie uczenia maszynowego wśród programistów. Ale nie jest też tanie. $250 za auto (którego w sumie można nie mieć w ogóle, bo są wyścigi wirtualne), $3 za godzinę trenowania modelu. 10 godzin wychodzi za darmo na nowym koncie (ale polecam sobie najpierw sporo poczytać z linków we wpisie tym i poprzednich, bo można je łatwo zmarnować).

Obecnie udało mi się zejść poniżej 20 sekund na wirtualnym torze, ale nie udało mi się tego odtworzyć na moim samochodziku z uwagi na brak toru. Będę próbował później.

Z ciekawostek udało mi się nauczyć auto do jazdy po prawej stronie. Przynajmniej na zakrętach. Sposób jest prosty: nie śpij dostatecznie dużo, walnij błąd w funkcji nagrody i dawaj najwyższą nagrodę jeśli pojazd dojedzie do prawej, zamiast gdy ścina zakręty.

W załączniku wizualizacja rozdawanych nagród w trakcie jednego z treningów. W jaśniejszych punktach nagroda była wyższa. Otrzymałem to kopiując gotowy kod od inżynierów Amazona, znajomość analizy danych jeszcze przede mną.

#naukaprogramowania #sztucznainteligencja #aws #steemit

[Hajduszoboszlo]

@tptak: Na jakiej zasadzie działa to trenowanie modelu? Mówimy tu o kodowaniu czy amazon używa jakiś sztuczek które w pewien sposób uproszczają ten mechanizm?

[tptak]

@Hajduszoboszlo: sztuczka jest taka, że masz się nauczyć uczenia maszynowego. Definiuję nagrodę za określone zachowanie i puszczam uczenie.