ChatGPT - rewolucja czy papuga powtarzająca poznane frazy?

Trochę naukowego wytłumaczenia czym jest ChatGPT, czym są modele LLM i ile wspólnego ma ta będąca na ustach wszystkich technologia z papugą powtarzającą zasłyszane frazy. Tekst po angielsku

[pa6lo]

Przeczytałem artykuł, widać napracowanie autora. Wadą tego tekstu jest rozwlekłość, np. nadużywanie wyrazów albo dekorowanie rzeczowników zbędnymi przymiotnikiami (extensive detail, surrounding world). Co właściwie przekazuje ten akapit?

It was at this moment, when all my hope in humanity praising its new god had faded, that someone finally presented me with a sound and actually good and useful application of ChatGPT in particular but any LLM in general.

[Dragonan]

@pa6lo: Tak wypowiadają się ludzie z w miarę wysoką znajomością języka dla których ten język nie jest językiem rodzimym. Potrafią powiedzieć wszystko, ale brakuje im słów i wyrażeń, aby wyrażać się w sposób zwięzły tak jak native.

[Dragonan]

Tak wypowiada się ktoś kto nie potrafi wyjść poza swoją bańkę. Rzeczywiście z punktu widzenia uczenia maszynowego GPT-4 nie jest żadnym wielki osiągnięciem.
Ale trzeba patrzeć na to z zupełnie innej strony.
---GPT-4 przerasta umiejętnościami tworzenia wypowiedzi i wiedzą większość ludzi. Zwykły człowiek produkuje znacznie większą ilość "halucynacji" niż GPT-4.
---Słowa w ludzkim mózgu produkowane są w ten sam sposób. Kolejne słowo pojawia się na podstawie słów poprzednich i aktywnego kontekstu. Produkujemy

[k00rwin2023]

@Dragonan tak tylko że z tego co wiem tam w uczeniu maszynowym ważna jest statystyka i zbiory danych które są udostępnione do nauki, w ludzkim mózgu nie ma odpowiedników takich procesów. Człowiek jakkolwiek by na to patrzeć często jednak przyznaje że czegoś nie wie, a tylko jednostki zaburzone w większym lub mniejszym stopniu będą konfabulować, a AI w skutek działań algorytmów, gdy nie będzie miała dostępu do wystarczających danych będzie to

[Dragonan]

@k00rwin2023: Ten mechanizm nie jest obcy ludzkiej psychice. A dokładnie implementacji psychiki w ludzkim mózgu. I ta implementacja jest znacznie doskonalsza niż to co próbujemy robić w uczeniu maszynowym. Z wielu powodów. Głównym są na razie koszty obliczeniowe.

To że sztuczne sieci neuronowe opisujemy za pomocą równań matematycznych nie jest ich ani zaletą, ani wadą. To co dzieje się w mózgu też staramy się opisywać coraz dokładniej za pomocą równań

[CJzSanAndreas]

ChatGPT całą wiedzę znajdującą się w Internecie zbiera w jedno miejsce.

[MrAndy]

#pdk #cyberpunk2077 ( ͡° ͜ʖ ͡°)