Stanfordi teadlased leiavad, et GPT-4 muutub aja jooksul lollimaks
Varia / / July 20, 2023
ChatGPT tasulise versiooni täpsus oli madalam kui tasuta vestlusrobotil.
Uus Uuring Stanfordi ülikooli teadlased kinnitasid selle üle, mille üle netiinimesed on nädalaid kurtnud: ChatGPT Plus, mis põhineb GPT-4 on tõesti muutunud lollimaks – erinevalt GPT-3.5-st, mis käivitab vestlusroti tasuta versiooni.
Oma uuringus võrdlesid autorid vastuseid erinevatele GPT-4 ja GPT-3.5 põhinevate vestlusrobotite päringutele. Nad leidis, et uues versioonis on vestlusroboti käitumine ja mõnele päringule antud vastuste täpsus märgatavalt halvenenud.
Autorid võrdlesid märtsis ja jaanuaris välja antud GPT-4 ja GPT-3.5 keelemudeleid. Nad leidsid, et selle aja jooksul langes GPT-4 täpsus märgatavalt, samas kui GPT-3.5 oma, vastupidi, kasvas.
Näiteks küsimusele, kas 17077 on algarv, vastamise täpsus langes 95,2%, samas kui GPT-3,5, vastupidi, kasvas 7,4%-lt 86,8%-le. Samuti on mõlema mudeli praegustes versioonides vähenenud võimalus närvivõrgu poolt kirjutatud koodi edukaks täitmiseks.
Varem on OpenAI asepresident Peter Welinder seda juba teinud vastas ChatGPT Plus kasutajate süüdistustele:
Ei, me ei teinud GPT-4 lollimaks. Kõik on täpselt vastupidine: me muudame iga uue versiooni eelmisest nutikamaks.
Nüüd on meil selline hüpotees: kui kasutate midagi aktiivsemalt, hakkate märkama probleeme, mida te varem ei näinud.
Peeter Welinder
OpenAI toote asepresident
Ühes vastuses sellele säutsule ütles Welinder küsis esitage tõendid selle kohta, et vestlusrobot on halvemaks muutunud. Stanfordi teadlaste uuring ilmus 5 päeva pärast seda – ja OpenAI-lt pole veel vastust tulnud.
See ei ole esimene kord, kui GPT-4 süüdistatakse valeandmete esitamises. Märtsis NewsGuardi analüütikud avastatudet GPT-4-l põhinevat ChatGPT-d on lihtsam valetada – samas kui OpenAI ise väidab vastuste täpsuse 40% tõusu võrreldes GPT-3.5-ga. IN Eelkõige NewsGuardi testides lükkas närvivõrgu uus versioon vähem tõenäolisemalt ümber valeteavet, sealhulgas valeandmeid kaasaegsete sündmuste ja teooriate kohta. vandenõud.
Loe ka🧐
- 6 ChatGPT analoogi
- James Cameron AI ohtudest: "Ma hoiatasin teid juba 1984. aastal, kuid te ei kuulanud"
- 8 tehisintellekti müüti, mida isegi programmeerijad usuvad