Az új kutatási kezdeményezés célja egy nagy nyelvű mesterséges intelligencia modell felépítése Délkelet-Ázsiában

Szingapúr 52 millió dollárt fektet be egy olyan nagy nyelvi modell kidolgozására, amely eltér a nyugati nemzetekétől.

Egy új kutatási kezdeményezés van folyamatban egy olyan nagy nyelvi modell (LLM) felépítésére, amely jobban megfelel a délkelet-ázsiai nemzetek demográfiai jellemzőinek.

A Nemzeti Multimodális LLM Programnak nevezett kezdeményezést Szingapúr vezeti egy olyan mesterséges intelligencia (AI) nagy nyelvi modell kifejlesztésére, amely támogatja a régió kultúrájának és nyelvének változatos keverékét.

Három kormányzati ügynökség - az Infocomm Media Development Authority (IMDA), az AI Singapore (AISG) és a Tudományos, Technológiai és Kutatási Ügynökség (A*STAR) - együttműködött a kutatási program elindításában, 70 millió szingapúri dollár értékben. 52,48 millió dollár) a Nemzeti Kutatási Alapítványtól.

"Mivel a technológia gyorsan fejlődik, stratégiai szükség van az LLM-ek szuverén képességeinek fejlesztésére" - áll az ügynökségek közös nyilatkozatában. "Szingapúr és a régió helyi és regionális kultúrája, értékei és normái eltérnek a nyugati országokétól, ahonnan a legtöbb nagy nyelvi modell származik."

Hangsúlyozták annak fontosságát, hogy Délkelet-Ázsiában, köztük Szingapúrban is olyan multimodális és lokalizált LLM-eket fejlesszenek ki, amelyek megértik a régió sokszínű kultúrájához és nyelvéhez kapcsolódó kontextust és értékeket. Ezek a változatosságok magukban foglalhatják például a nyelvek közötti kontextusváltást Szingapúr többnyelvű lakosságában.

A kutatási kezdeményezés a Szingapúri Nemzeti Szuperszámítási Központ nagy teljesítményű számítástechnikai erőforrásait fogja felhasználni, és az ország kutatási és mérnöki képességeit fejleszti a multimodális LLM-ekben.

"Ez a nemzeti erőfeszítés alátámasztja Szingapúr elkötelezettségét amellett, hogy globális mesterségesintelligencia-központtá váljon" - mondta Ong Chen Hui, az IMDA biztech csoport vezérigazgató-helyettese. "A nyelv az együttműködés alapvető eleme. A tehetségekbe való befektetéssel és a regionális nyelvek nagy nyelvű mesterségesintelligencia-modelljeinek befektetésével szeretnénk elősegíteni a határokon átnyúló iparági együttműködést, és előmozdítani az AI innováció következő hullámát Délkelet-Ázsiában."

A kezdeményezés az AISG délkelet-ázsiai nyelvek egy hálózatban (SEA-LION) jelenlegi erőfeszítéseire épül. Ez egy nyílt forráskódú LLM, amely a kormányzati ügynökség szerint kisebb, rugalmas és gyorsabb a jelenleg piacon lévő LLM-ekhez képest. . A SEA-LION jelenleg két alapmodellel fut: egy hárommilliárd paraméteres modellen és egy hétmilliárd paraméteres modellen.

A nyílt forráskódú modell jelentőségét részletezve az AISG azt mondta: "A meglévő LLM-ek erős elfogultságot mutatnak a kulturális értékek, a politikai meggyőződés és a társadalmi attitűdök tekintetében. Ez a képzési adatoknak köszönhető, különösen az internetről lekapart képzési adatoknak, amelyek gyakran aránytalanul nagy WEIRD-alapú származású. A WEIRD a nyugati, művelt, iparosodott, gazdag, demokratikus társadalmakra utal. A nem WEIRD származású emberek kevésbé valószínű, hogy írástudók, használják az internetet, és könnyen hozzáférhetnek eredményeikhez."

A SEA-LION célja olyan LLM-ek létrehozása, amelyek jobban reprezentálják a "nem FORRÁS" populációkat. Tanítási adatai 981 milliárd nyelvi tokent tartalmaznak, amelyeket az AISG a tokenizálási folyamat során a szöveg szétbontásából származó szótöredékekként határoz meg. Ezek a töredékek 623 milliárd angol tokent, 128 milliárd délkelet-ázsiai zsetont és 91 milliárd kínai tokent tartalmaznak.

A lokalizált LLM-ek létrehozására irányuló erőfeszítések Szingapúr legújabb mesterségesintelligencia-stratégiájának részét képezik, amely arra törekszik, hogy 2030-ra a mesterségesintelligencia-megoldások globális fejlesztési központja legyen. Ezek az erőfeszítések magukban foglalják azt a tervet, hogy a következő időszakban megháromszorozzák az AI-szakemberek számát, 15 000-re. három-öt évre, és olyan ökoszisztémát biztosítanak, amely támogatja az irányítást, a tesztelést és a teljesítményértékelést, az AI etikai és biztonsági irányelvei mellett.

Lawrence Wong szingapúri miniszterelnök-helyettes a nemzeti mesterségesintelligencia-stratégia elindítása alkalmából kijelentette, hogy a világ feltérképezetlen területre tart a mesterséges intelligencia legújabb fejleményei miatt: "A mesterséges intelligencia eddig főként a mintafelismerésről szólt. AI rendszereink lesznek ügynöki és tranzakciós képességekkel. Lesznek olyan gépeink, amelyek emberhez hasonló kognitív képességekkel és önismereti és független döntéshozatali képességekkel rendelkeznek."

Az emberi életek jelentős megváltoztatásának és a társadalmakra gyakorolt hatásának lehetősége miatt a mesterséges intelligencia felelős fejlesztését és elfogadását tudatosabban kell irányítani, mondta Wong.