Lehet, hogy a világ legfejlettebb AI-modelljei már sakkban verik az embert, de úgy tűnik, egyvalamivel még ők sem tudnak mit kezdeni: az alfa generáció szlengjével. Egy új kutatás, amely az ACM Digital Library-ben jelent meg, azt vizsgálta, mennyire képesek a vezető nyelvi modellek - GPT-4, Claude, Gemini és Llama 3 - értelmezni a 2010 és 2024 között született generáció online kommunikációját. Az eredmény lesújtó: az AI-modellek gyakran eltévedtek a rövidítések, az irónia és a szándékosan félrevezető kódolt nyelv világában.
A kutatók olyan példákon keresztül mutatták be a problémát, mint például a "fr fr let him cook" (tényleges támogatás valaki felé) és a "let him cook lmaoo" (szarkasztikus gúnyolódás). A kontextus itt minden, és ez az, ami rendszeresen kifogott az LLM-eken. Különösen problémásnak bizonyult a "maszkolt zaklatás" - azaz amikor a bántó tartalom rejtett, belsős nyelvezeten keresztül jelenik meg. Ez komoly gondot jelenthet azokban a rendszerekben, ahol AI-t használnak tartalommoderálásra.
A kutatás célja nem csak a modellek teljesítményének mérése volt, hanem az is, hogy felhívja a figyelmet az AI-biztonsági rendszerek hiányosságaira. A tanulmány szerint "sürgősen szükség van fejlettebb AI-rendszerekre, amelyek jobban védik a fiatal felhasználókat, különösen mivel az alfa generáció gyakran nem kér segítséget, mert úgy érzik, a felnőttek nem értik a digitális világukat".
Az AI-modellek mellett a kutatás a szülők nyelvi megértését is vizsgálta. Az eredmények alapján a felnőttek körülbelül 68%-os pontossággal értették meg az alapvető alfa generációs szlenget - ami megegyezett a legjobban teljesítő AI, Claude szintjével. Ugyanakkor az AI-k kismértékben jobban teljesítettek a kontextus és a potenciális veszélyek felismerésében, de összességében mind a humán, mind a gépi "védelmezők" alulteljesítettek. Egyedül az alfa generációs korosztály mutatott megbízható megértést a nyelvezet, annak árnyalatai és a kapcsolódó kockázatok terén.
A tanulmány végkövetkeztetése világos:
"Ez a kutatás az első szisztematikus értékelése annak, hogyan értelmezik az AI-biztonsági rendszerek az alfa generáció egyedi digitális kommunikációját. A fiatal felhasználók bevonásával sikerült számszerűsítenünk a megértési szakadékot ember és AI, valamint a védeni kívánt generáció között".
A generációs különbségek eddig is komoly kihívást jelentettek a szülők számára, de úgy tűnik, hogy még a mesterséges intelligencia sem tudja dekódolni a legújabb nyelvezetet.
