[groman43]

Będzie czytane xD

Pewnie będę żałował, ale co mi tak - jeśli ktoś chciałby się razem ze mną zacząć uczyć AI/ML, to w sumie czemu nie.

#programowanie #programista15k #pracait i trochę #matematyka

[AntyKuc]

@groman43: Ehh, były te macierze na studiach, ale człowiek już pozapominał, a teraz mógłby AGI klepać, zamiast CRUDa...

[acpiorundc]

@groman43: @AntyKuc tak przy okazji jakby ktoś chciał sobie przypomnieć co było na studiach:

https://wazniak.mimuw.edu.pl/index.php

[ly000]

@groman43: zamierzasz publikować artykuły naukowe z AI? bo wiesz, że AI jest rozwijane przez naukowców, nie przez programistów i do tych osób jest prawdopodobnie skierowana ta książka? programiści "AI" (i generalnie firmy które się tym zajmują, pomijając największych graczy z działami R&D) jedynie wykorzystuje gotowe rozwiązania.

[nigihayami32]

@ly000: a czym różni się naukowiec od programisty?

[ly000]

@nigihayami32: tym się zajmują naukowcy: https://arxiv.org/pdf/2203.02155.pdf
bez zrobienia doktoratu nawet nie macie podejścia do nauki i zajmowania się tym profesjonalnie

[nigihayami32]

@ly000: oho widzę mamy specjalistę w swojej dziedzinie xd No ciekawe, co jeszcze masz mądrego dzieciaku do powiedzenia?

[nigihayami32]

@ly000: to ja cie oświecę. Naukowcy zajmują się badaniami, a inżynierowie wdrażaniem tych badań do realnych zastosowań. Obrażasz innych nie mając pojęcia czym się zajmuja i wrzucasz każdego do jednego wora. Ogarnij się trochę

[nigihayami32]

@groman43: dużo matmy, bez robienia doktoratu będzie ciężko. Jak nie jesteś jakimś wyjadaczem udzielającym się w open source po godzinach to się w to nie pakuj

[groman43]

@nigihayami32: To jest matma na poziomie studiów inżynierskich pieprwszego stopnia. Wszystko to już raz w życiu przerabiałem.

[Krolik]

@ly000: ale zdajesz sobie sprawę z tego że można być w obu tych grupach jednocześnie? Być i naukowcem z doktoratem i równocześnie programistą? U mnie w zespole w firmie co trzecia osoba ma doktorat, a w zeszłym roku byłem na konferencji naukowej prezentować nasz papier. Istnieją firmy, które robią R&D, nie cała nauka powstaje na uczelniach i w publicznych instytucjach.

[groman43]

@ly000: Przede wszystkim nie przesadzaj - to nie jest super skomplikowana matma. Nie trzeba mieć doktoratu, żeby to zrozumieć.

Podobnie podstawy AI to też nie jest super rocket science.

[nigihayami32]

@Krolik: chłop wszystkich do jednego wora wrzuca i tworzy podzialy, co mu poradzisz

[arysto2011]

Przede wszystkim nie przesadzaj - to nie jest super skomplikowana matma. Nie trzeba mieć doktoratu, żeby to zrozumieć.

Podobnie podstawy AI to też nie jest super rocket science.

@groman43:

[arysto2011]

@groman43: Tu masz publikację zatytułowaną: wstęp

https://arxiv.org/pdf/2304.10557.pdf

Możesz wyjaśnić swoimi słowami teorię za "self-attention"?

[groman43]

@arysto2011: A co w tym trudnego? Przecież to tylko zwykłe liczenie średniej ważonej, masz to wprost napisane. Ponieważ średnia jest liczona dla wielu zmiennych jednocześnie, najłatwiej przedstawić tą operacją za pomocą mnożenia macierzy. Macierz A jest tak skonstruowana, żeby wybierała wartości istotne dla następnego kroku. To również jest wprost napisane. Autor używa pojęcia "self-attention", ponieważ macierz A jest skonstruowana na podstawie macierzy X. Konkretne wzory na macierz A masz na

[TurboDynamo]

bez zrobienia doktoratu nawet nie macie podejścia do nauki i zajmowania się tym profesjonalnie

@ly000: bzdura kompletna, robiłem w tych tematach magisterkę więc wiem co mówię. Trzeba mieć jakieś podstawy matematyki uniwersyteckiej i tyle.

[ly000]

@TurboDynamo: co konkretnie robiłeś?

[TurboDynamo]

@ly000: zbyt szczegółowe żebyś mnie zidentyfikował bo moja praca jest publiczna. Temat związany z AI, opracowywałem swój własny algorytm na podstawie kilku artykułów naukowych. Nie było to trudne tak jak twierdzisz, trzeba mieć podstawy z matematyki uniwersyteckiej + zrobić kilka kursów związanych z uczeniem maszynowym, algorytmami, głębokim uczeniem, może jeszcze jakaś wiedza techniczna z chmur albo wielordzeniowych maszyn by się przydała.
Jeśli dla ciebie czytanie prostych notacji matematycznych to problem