[JamesJoyce]

#programista15k #programowanie #sztucznainteligencja #filozofia

Ciekawe nowe badanie w którym autorzy przeprowadzili test Turinga współczesnym llmom. Wbrew powszechnemu przekonaniu, żaden z gpt nie przeszedł tego testu.

We evaluated GPT-4 in a public online Turing Test. The best-performing GPT-4 prompt passed in 41% of games, outperforming baselines set by ELIZA (27%) and GPT-3.5 (14%), but falling short of chance and the baseline set by human participants (63%). Participants' decisions were based mainly on linguistic style (35%) and socio-emotional traits (27%), supporting the idea that intelligence is not sufficient to pass the Turing Test.

https://arxiv.org/abs/2310.20216

[zibizz1]

@JamesJoyce:
GTP-3.5 14%
GPT-4 41%
human 63%

Może i zaden nie przeszedł ale pokazane to liczby wskazuja że za 1-3 lata takie samo bdanie przejdą

[noipmezc]

@JamesJoyce: z ciekawosci sam włączylem jakis losowy test xd

[MilionoweMultikonto]

@noipmezc: witaj kolego NPC

[Varin]

@MilionoweMultikonto: A to wy na Wypoku siedzicie jak nie musicie sie renderowac na mapie?

[noipmezc]

@MilionoweMultikonto: https://umhsapiens.com/are-you-a-robot-pass-the-turing-test/ zapraszam do zabawy

[MilionoweMultikonto]

@noipmezc: też miałem 43%, ten test jest durny jak każdy, w którym trzeba się wpasować w klucz odpowiedzi

[noipmezc]

@MilionoweMultikonto: Myślę że w tych pytaniach brakowało troche kontekstu. Na pewno nie powiedziałbym że nóż leży na stole jeśli pytający stałby przy tym stole, ale w jakiejś innej sytuacji mógłbym tak odpowiedzieć.

[MilionoweMultikonto]

@noipmezc: dokładnie

[obieq]

@zibizz1: albo i nie bo już trąbią o ograniczeniach. To jak z prockami, które co parę lat podwajały moc, a obecnie masz po 5% przyrostu

[Djelon]

@noipmezc: 29% LOL ten test jest jakiś lewy, albo my inaczej postrzegamy świat niż przeciętny człowiek

[Flutter_M_Shydale]

@noipmezc: 43 również

[AntyKuc]

@Flutter_M_Shydale: @Djelon @MilionoweMultikonto Nie wyszedł wam ten test, bo jesteście programem komputerowym w symulacji.

[JamesJoyce]

@zibizz1: Może i wcześniej.