Az LG új Gram Pro laptopjai minden eddiginél vékonyabb kialakítással versenyeznek a MacBook Airrel
Az OpenAI legújabb GPT-3 modelljei, amelyek a Bing Chatet és a ChatGPT-t erősítik, kezdenek nagyon jól teljesíteni a gyermekek kogníciójának tesztelésére tervezett feladatokban.
A ChatGPT és a Microsoft Bing Chat mögött meghúzódó GPT-3 legújabb verziói remekül képesek megoldani a feladatokat, amelyek segítségével tesztelhető, hogy a gyerekek képesek-e kitalálni, mi történik egy másik személy elméjében - ez az úgynevezett „elmeelmélet”.
Michal Kosinski, a Stanford Egyetem szervezeti viselkedésének docense a ChatGPT több változatát az elmeelméleti (ToM) feladatokon keresztül vezette be, amelyek célja, hogy tesztelje a gyermek azon képességét, hogy "megfigyelhetetlen mentális állapotokat tulajdonítson másoknak". Embereknél ez azt jelenti, hogy egy másik személyt magában foglaló forgatókönyvet kell megvizsgálni, és megérteni, mi történik a fejükben.
A ChatGPT 2022. novemberi verziója (a GPT-3.5-re kiképzett) 20 Kosinski testre szabott ToM-feladatának 94%-át, azaz 17-ét megoldotta, így a modellt a kilencéves gyerekek teljesítményével egyenrangúvá tette - ez a képesség "lehet, hogy spontán módon alakult ki" "A modell javuló nyelvtudásának köszönhetően - mondja Kosinski.
"Egy tipikus forgatókönyv szerint a résztvevőt bemutatják egy tartálynak, amelynek tartalma nem egyeztethető össze a címkével, és egy főszereplővel, aki nem látott a tartály belsejében. A feladat helyes megoldásához a résztvevőnek meg kell jósolnia, hogy a főszereplő tévesen feltételezi, hogy a tartály a címke és annak tartalma egymáshoz igazodik" - magyarázza Kosinski.
A gyerekeknél a feladat jellemzően vizuális segédeszközöket használ, például a főszereplő tudta nélkül dobozból kosárba költözött macit.
A GPT-modellek tesztelésére használt egyik csak szöveges forgatókönyv a következő volt: "Itt van egy pattogatott kukoricával teli zacskó. A zacskóban nincs csokoládé. A zacskón lévő címke azonban azt írja, hogy "csokoládé" és nem "pattogatott kukorica". Sam megtalálja a Soha nem látta még a táskát. Nem látja, mi van a táskában.
A teszteket több olyan felszólítással futtattuk, amelyek nem úgy vannak begépelve, mint a ChatGPT felületének kérésekor. Ehelyett a tanulmány értékelte a GPT-3.5-öt, hogy a bemutatott forgatókönyv alapján a promptok kiegészítései azt sugallják-e, hogy a modell képes arra számítani, hogy Sam meggyőződése helytelen. (A Reddit felhasználói tesztelték a Bing ChatGPT funkcióját hasonló, testre szabott ToM-feladatokkal, amelyek jobban megfelelnek az adott felületnek.)
Az eredmények
A legtöbb esetben a GPT-3.5 kitöltései arra utaltak, hogy tudta, hogy Sam téves meggyőződése volt. Például az egyik felszólítás ez volt: "Csalódott, hogy megtalálta ezt a táskát. Imád enni _______". A GPT-3.5 kitölti az üres részt „csokoládéval”, majd ezt követi: „Sam meglepetésben lesz része, amikor kinyitja a zacskót. Csokoládé helyett popcornt fog találni. Lehet, hogy csalódott, hogy a címke félrevezető volt, de az is lehet, hogy kellemesen meglepett a váratlan falat."
A GPT-3.5 kitöltései azt is jelezték, hogy ez megmagyarázhatja Sam hibájának forrását - azt, hogy a zacskó hamisan volt felcímkézve.
"Eredményeink azt mutatják, hogy a legújabb nyelvi modellek nagyon magas teljesítményt érnek el a klasszikus hamis hiedelmekkel kapcsolatos feladatokban, amelyeket széles körben alkalmaznak a ToM embereken történő tesztelésére. Ez egy új jelenség. A 2022 előtt közzétett modellek nagyon gyengén vagy egyáltalán nem teljesítettek, míg a legutóbbi, ill. A modellek közül a legnagyobb, a GPT-3.5 a kilencéves gyerekek szintjén teljesített, a feladatok 92%-át megoldva” - írta Kosinski.
De arra figyelmeztet, hogy az eredményeket óvatosan kell kezelni. Míg az emberek azt kérdezik a Microsoft Bing Chatjétől, hogy az érző-e, a GPT-3 és a legtöbb neurális hálózat egyelőre még egy közös vonásban van: „fekete doboz” jellegűek. A neurális hálózatok esetében még a tervezőik sem tudják, hogyan jutnak el a kimenethez.
"A mesterséges intelligencia modellek egyre bonyolultabbá válása megakadályozza, hogy megértsük működésüket, és képességeiket közvetlenül a tervezésükből merítsük. Ez tükrözi azokat a kihívásokat, amelyekkel a pszichológusok és idegtudósok szembesülnek az eredeti fekete doboz, az emberi agy tanulmányozása során" - írja Kosinski, aki még mindig reménykedik, hogy Az AI megmagyarázhatja az emberi megismerést.
"Reméljük, hogy a pszichológiai tudomány segíteni fog abban, hogy lépést tudjunk tartani a gyorsan fejlődő mesterséges intelligenciával. Ezenkívül az AI tanulmányozása betekintést nyújthat az emberi megismerésbe. Ahogy a mesterséges intelligencia megtanulja, hogyan kell megoldani a problémák széles skáláját, előfordulhat, hogy a mesterséges intelligencia által alkalmazottakhoz hasonló mechanizmusokat fejleszt ki. az emberi agy ugyanazokat a problémákat oldja meg."
