A Claude AI elemezheti a Google Dokumentumokat, és most visszajelzést adhat

Kipróbáltam Claude új, ingyenes adatrögzítő AI-eszközét. Sajnos még a közepes méretű adatkészleteket is elutasítja - és a fizetős verzió sem sokkal jobb.

A múlt héten az Anthropic (amelynek 4 milliárd dolláros befektetése van az Amazontól) bejelentette, hogy a Claude 3.5 Sonnet mostantól támogatja az adatelemzést.

A TechCruch főcíme ennek a képességnek az volt, hogy "Az Anthropic mesterséges intelligenciája mostantól képes kódot futtatni és írni". Ez technikailag helyes, de ne izgulj túl. Claude nem fog ott ülni és szimulálni az összes kódodat. A valóság sokkal korlátozottabb.

Az Anthropic bejelentette, hogy hasonló a ChatGPT Advanced Data Analysis szolgáltatásához. Az egyik különbség az, hogy Claude elemző eszköze mindenki számára elérhető, beleértve az ingyenes felhasználókat is. A ChatGPT speciális adatelemzése csak a havi 20 dollárt vagy többet fizető Plus- és Enterprise-fiók felhasználói számára érhető el.

Kód generálása

A ChatGPT Plus és a Claude is úgy végzi el adatelemzését, hogy olyan kódrészleteket ír és futtat, amelyek elemzik és feldolgozzák az adatokat. Az egyik legfontosabb különbség az, hogy Claude JavaScriptben írja a kódját, míg a ChatGPT Pythonban írja a kódját.

Érdekes választások ezek. A Python numerikus elemzési könyvtárak gazdag ökoszisztémájával rendelkezik, mint például a Pandas, a NumPy és a SciPy. A JavaScript is gazdag ökoszisztémával rendelkezik, de adatai és mesterséges intelligencia kínálata nem olyan kiterjedt, mint a Python esetében. A Python nagyon erős a gépi tanulásban és az AI-ban, olyan keretrendszerekkel, mint a TensorFlow, a PyTorch és a Keras. A Python kiváló támogatást nyújt a nagy adatokhoz is, bár, mint látni fogod, Claude jelenlegi elemzőeszközében semmi sem tekinthető még közepes adatnak is.

Ezzel szemben a JavaScript ideális a weboldalakon történő adatmegjelenítéshez. Az Anthropic megoldás a React-ot használja, de vannak olyan nagyszerű vizualizációs könyvtárak is, mint a D3.js és a chart.js az információk bemutatásához. Furcsának tartottam, hogy ilyen nagyszerű vizualizációs eszközökkel a Claude segítségével generált kördiagramok hajlamosak voltak levágni egyes kategóriák adatcímkéit.

Amikor megkéri Claude-ot, hogy dolgozzon fel adatokat, akkor megadja a kimenetet, de lehetővé teszi, hogy megtekintse a mögöttes kódot, amelyet az adatelemzés elvégzéséhez generál. Íme egy példa.

Felhasználási korlátok

Úgy döntöttem, hogy a Claude segítségével tesztelem az elemzési képességeit. Használatomat az ingyenes verzióra korlátoztam. Claude GYIK-je szerint a 20 dolláros/hó Pro verzió ötszörösére növeli a használati korlátokat.

Ez valószínűleg komoly használathoz szükséges, mert körülbelül 20 perces tesztelés után leálltam.

Megpróbáltam új csevegést nyitni, de az nem engedett vissza. Egy óra várakozás után még feltehettem néhány kérdést.

Kód írása az adatok törléséhez

Claude adatelemzési képességeinek tesztelésére felkerestem a data.gov webhelyet, és letöltöttem a társadalombiztosítási kártya alkalmazásokból származó, a babanévhasználatra vonatkozó Social Security Administration adatkészletet.

Ezek az adatok ZIP-fájl formájában érkeztek. 145 vesszővel elválasztott értékű (CSV) szövegfájlt bontottam ki, amelyek 1880 és 2023 között tartalmazzák a babanév adatait, évente egy fájlt.

Először megpróbáltam kiválasztani az összes fájlt, és csoportként importálni őket a Claude-ba. Azt a tájékoztatást kaptam, hogy Claude csak öt fájlt importál egyszerre.

Ezért úgy döntöttem, hogy írok egy szkriptet, amely egyetlen fájlt hoz létre, amely az összes adatot tartalmazza. A baj az volt, hogy minden egyes fájl nem tartalmazta az évet a mezők között. Tehát a szkriptemnek hozzá kell adnia a fájl nevétől számított évet a fájl minden rekordjához, majd ezt kell tennie az összes fájlra.

Ahelyett, hogy magam kódoltam volna, megkértem Claude-ot, hogy csinálja meg helyettem.

Gyorsan össze kell kombinálnom 145 szöveges fájlt Macintosh-on. Minden fájlnév yob betűkből és négy számból áll, amelyek az évet jelzik, majd a .txt. Maguk a fájlok vesszővel elválasztott értékek. Minden egyes fájlnál a fájlnévben szereplő évszámot, majd egy vesszőt kell a megfelelő fájl minden sorába beírnom. Ezután mind a 145 fájlt egy főfájlba kell egyesítenem. Hogyan tudom ezt gyorsan megtenni?

Létrehozott egy shell szkriptet, amely úgy nézett ki, mint aki elvégzi a feladatot.

Mentettem a szkriptet és lefuttattam.

Működött és pontosan úgy sikerült, ahogy kértem. A shell szkript futtatásának eredménye egy 37 MB-os fájl lett. Sajnos hamar rájöttem, hogy a 37 MB túllépte Claude 30 MB-os feltöltési korlátját. Szükségem volt egy jóval kisebb adatkészletre.

Ahelyett, hogy minden év névadatait használnám, arra jutottam, hogy ha évtizedenként csak egy fájl névadatait használom, az adatkészlet méretét az eredeti méret 10%-ára csökkentem. Így hát megváltoztattam a felszólítást, és visszaadtam Claude-nak.

Gyorsan össze kell kombinálnom 145 szöveges fájlt Macintosh-on. Minden fájlnév yob betűkből és négy számból áll, amelyek az évet jelzik, majd a .txt. Maguk a fájlok vesszővel elválasztott értékek. Ha minden fájl neve 0.txt-re végződik, írja be a fájlnévben szereplő évszámot, majd egy vesszőt a megfelelő fájl minden sorába. Ezután az összes 0.txt-re végződő fájlt egy főfájlba kell egyesíteni. Ehhez írjon egy shell szkriptet.

Ez ugyanolyan jól működött, mint az első felszólítás, és kaptam egy 3,9 MB-os fájlt.

Összességében nagyon elégedett voltam a mai Claude 3.5 Sonnet kódolási munkájával. Korábban lefuttattam ezt az LLM-et a kódolási tesztjeim során, sok siker nélkül. Szóval jó volt látni, hogy ezúttal simán ment. Sajnos ez volt a mai tesztelési folyamat utolsó része, amely zökkenőmentesen lezajlott.

Több korlát Claude-ban

Nézzük tehát a Claude-i adatelemzést. Sajnos úgy tűnik, hogy Claude nagyon korlátozott a befogadható adatok mennyiségét illetően. Claude azt mondja, hogy a Pro verziója "legalább ötszöröse használatát teszi lehetővé ingyenes szolgáltatásunkhoz képest", és "ha a beszélgetések viszonylag rövidek, akkor 5 óránként legalább 45 üzenetet küldhet."

Ez nem sok. És bár Claude azt mondja, hogy öt fájlt és 30 MB-ot tölthet fel, azt tapasztaltam, hogy az összesített 3,9 MB-os fájlomat 9124%-kal túllépték a hosszkorláton. Ez a fájl 219 181 rekordot tartalmaz.

Oké, rendben. Így aztán csak egy évig próbálkoztam egy fájllal. A yob2020.txt fájl mindössze 561 KB méretű, és mindössze 31 550 rekordot tartalmaz. Ez a fájl láthatóan 1239%-kal meghaladja Claude hosszkorlátait.

Kicsit számolva, és feltételezve, hogy nem érte el az üzenethasználati korlátokat, úgy tűnik, hogy Claude körülbelül 2000 sorra korlátozza az adatelemzést, egyenként körülbelül 25 karakterből.

Hasonlítsuk össze a ChatGPT Plus-szal, jó?

Most igen, az ingyenes Claude verziót használom, de ha a Claude Pro 5X kapacitást biztosít, akkor általánosíthatjuk (mivel a cég nem ad szigorú határokat), hogy a Claude Pro körülbelül 10 000 25 karakteres sort max.

Ezzel szemben 69 215 rekordot betápláltam soronként átlagosan 50 karakterrel a ChatGPT Plusba, és tökéletesen működött. A ChatGPT Plus-ba betápláltam egy 22 797 rekordból álló rekordadatkészletet, amely az alkalmazásaimat eltávolító felhasználók véleményadataiból áll (a legtöbb rekordban érzelmi kifejezéseket és rögzített adatokat is tartalmaznak), és az tökéletesen működött. Két, több mint 170 000 sornyi 3D nyomtató G-kódból álló fájlt betápláltam a ChatGPT Plusba, és tökéletesen működött.

A ChatGPT Plus adatelemzését valóban hasznosnak és termelékenységnövelőnek találtam. De ha egy profi fiók 10 000 vagy kevesebb rekordra korlátozódik, ahogy Claude Pro teszi, valószínűleg érdekes technológiai bemutatónak találtam volna, de nem olyasvalaminek, amit megbízhatóan hozzáadhatnék a munkafolyamat-készletemhez.

Valójában Claude adatelemzésének tesztelése

Körülbelül 30 adatkészletet töltöttem le a data.gov webhelyről, mielőtt találtam egyet, amely elég kicsi volt ahhoz, hogy Claude megvizsgálja. Ez egy 2020. novemberi adatkészlet az örökbefogadható háziállatokról a Montgomery Megyei Állatszolgálat és Örökbefogadási Központtól (Derwood, Maryland).

Ez az adatkészlet 85 rekordot tartalmaz, egyenként körülbelül 190 karakterből. Lássuk, mit tud mondani nekünk.

A „Mit tud mondani ezekről az adatokról?” kérdéssel. Claude azonosította a leggyakoribb háziállat-típust (kutyát), a leggyakoribb beviteli típusokat (a gazdi megadja magát, majd elkóborolt - ez annyira szomorúnak tűnik), figyelemre méltó mintákat és egyedi jellemzőket (a Molly egy általános név).

Kértem egy kördiagramot, amely az állatok elterjedését ábrázolja. Ezt adta nekem, ami megmutatta a főbb állattípusokat, de az oszlopdiagram közel 50%-át hagyta az "Egyéb" kifejezéssel.

Tudni akartam, hogy mit jelent ez az "Egyéb" kategória. Van valami megrendítő abban a gondolatban, hogy az „Egyéb” kategória 30 százaléka trópusi halakból áll. Ez a lehangoló látomásom van az aranyhal-tálak soraiban, amelyek mindegyikében egy-egy aranyhal van.

Vessen egy pillantást arra a diagramra és a felette lévőre. Figyelje meg, hogy bár a diagramon bőven van hely a címkék megjelenítésére, mindkét diagramon le vannak vágva. Tudom, hogy a trópusi halak 30 százaléka van, de nem tudom a pontos százalékot, mert csak egy „3” látható.

A JavaScript kiváló diagramkönyvtárakkal rendelkezik. Úgy gondolom, hogy az Anthropic képes lett volna úgy módosítani a kimenetet, hogy teljes mértékben megjelenítse a diagramadatokat, különösen fekvő nézetben.

Nos, ez egy balhé

Nagyon reméltem, hogy Claude adatelemzési funkciói egyenrangúak lesznek a ChatGPT Plus szolgáltatásaival. Még ha Claude ingyenes verziója a ChatGPT Plus teljesítményének csak az ötödét tudná teljesíteni, lehet, hogy feliratkoztam volna egy előfizetésre.

Nagyon tetszik az az ötlet, hogy több elemző eszközön keresztül küldjem el az adataimat, és hasonlítsam össze az eredményeket. Ez önmagában indokolta volna, hogy aláírjak egy újabb 240 dollár/év mesterséges intelligencia számlát.

De mivel a fenti extrapolációimból egyértelműen kiderül, hogy a Claude Pro verzió még a legkisebb adatkészletet sem képes kezelni, amelyet korábban sikeresen betápláltam a ChatGPT Plusba, úgy tűnik, hogy nem éri meg a befektetést.

Megkerestem az Anthropicot véleményért, de még nem kaptam választ. Ha a cég válaszol, frissítem ezt a cikket a visszajelzéseivel.

Közben mit gondolsz? Használta a Speciális adatelemzést a ChatGPT Plusban? Ön Claude vagy ChatGPT felhasználó? Mikor vennéd fontolóra a Claude használatát a ChatGPT helyett? Tudassa velünk az alábbi megjegyzésekben.