Roblox lanserar AI-verktyg för att omskriva olämplig chatt

Roblox har introducerat en AI-driven funktion som omskriver olämpligt språk i realtidschattar. Verktyget syftar till att bibehålla samtalsflödet genom att ersätta stötande ord istället för att blockera dem med symboler. Denna uppdatering följer på nyliga säkerhetsåtgärder mitt i pågående rättsliga utmaningar kring barnskydd.

Roblox, den populära plattformen för onlinespel, har rullat ut ett nytt AI-drivet system för att hantera olämpligt språk i användarchattar. Tidigare ersatte plattformens filter meddelanden som bröt mot reglerna med en serie hash-tecken (####), vilket Roblox erkände kunde störa diskussioner och hindra kommunikation. Den uppdaterade funktionen ersätter nu automatiskt problematiska ord eller fraser med mer lämpliga alternativ, med start på svordomar och andra förolämpningar. För exempel, ett meddelande som ”Hurry TF up” skulle ändras till ”Hurry up!”. Deltagarna i chatten får en notifikation när ett meddelande har omskrivits, medan den ursprunglige avsändaren ser det redigerade innehållet markerat. Trots omskrivningen riskerar användare som upprepat bryter mot Robloxs gemenskapsstandarder straff, eftersom systemet inte frikänner brott mot policyn. Rajiv Bhatia, Robloxs chef för säkerhet, förklarade i ett blogginlägg: ”När dessa system skalas upp skapar de ett svänghjul för artighet, där realtidsfeedback hjälper användare att lära sig och följa våra gemenskapsstandarder.” Omskrivningsverktyget är inledningsvis tillgängligt i chatter mellan åldersverifierade användare i liknande åldersgrupper och stöder alla språk som täcks av Robloxs översättningssystem. Denna utveckling kommer efter att Roblox införde obligatorisk åldersverifiering i januari, utlöst av rapporter som beskriver ett ”pedofilproblem” på plattformen, där vuxna enligt påståenden groomade barn. Barn under 13 år är nu begränsade från att använda chatt i spel utanför specifika upplevelser, medan andra begränsas till interaktioner med jämnåriga. Dessa insatser har dock inte dämpat den rättsliga granskningen. I februari lämnade Los Angeles County in en stämning och hävdade att Roblox ”gör barn till lätta byten för pedofiler”. Mer nyligen har Louisianas justitieminister stämt och hävdat att Roblox ”skapade en offentlig park och fyllde den med sexualförbrytare som jagar på… barn”.

Relaterade artiklar

Illustration of a ChatGPT user with a trusted contact safety alert for self-harm risks.
Bild genererad av AI

OpenAI introduces trusted contact feature for ChatGPT users

Rapporterad av AI Bild genererad av AI

OpenAI has rolled out an optional safety tool allowing adult ChatGPT users to designate one trusted adult who can be alerted about potential self-harm risks detected in conversations. The feature, called Trusted Contact, involves human review before any notification is sent.

Roblox is introducing three age-specific account types to improve safety for younger users amid growing regulatory pressure. The tiers, Roblox Kids for ages 5-8, Roblox Select for 9-15, and standard Roblox for 16 and older, will roll out globally starting mid-May or early June. Restrictions on chat and content access will vary by age group.

Rapporterad av AI

Roblox has agreed to a $12 million settlement with Nevada to resolve claims related to child safety and exploitation on its platform, avoiding a trial. The deal includes funding for child support programs and new safety measures like enhanced age verification. Nevada Attorney General Aaron Ford hailed the agreement as a step toward safer online environments for children.

Canada has introduced legislation that would prohibit anyone under 16 from having social media accounts. The Safe Social Media Act also sets new rules for platforms and AI chatbots.

Rapporterad av AI

A new report indicates that NSFW uses make up well over half of traffic on the Grok chatbot developed by xAI. This includes requests for porn, adult role-play and erotica. The findings come from former employees cited in the report.

Denna webbplats använder cookies

Vi använder cookies för analys för att förbättra vår webbplats. Läs vår integritetspolicy för mer information.
Avböj