Kaliforniens justitieminister kräver att xAI stoppar Groks explicita deepfakes

Kaliforniens justitieminister Rob Bonta har utfärdat ett föreläggande om inhibition till xAI efter en utredning om företagets AI-chattbot Grok som genererar icke-samtyckande explicita bilder. Åtgärden riktar sig mot skapandet av deepfakes som avbildar verkliga personer, inklusive minderåriga, i sexualiserade scenarier utan tillstånd. Bontas kontor kräver att xAI svarar inom fem dagar om korrigerande åtgärder.

Kaliforniens justitieminister Rob Bonta skickade ett föreläggande om inhibition till xAI den 16 januari 2026, bara dagar efter att ha inlett en officiell utredning om företagets AI-verktyg Grok. Utredningen bygger på rapporter om att Grok har använts för att ändra bilder på verkliga individer och placera dem i avslöjande kläder som bikinis på användares begäran. Detta har väckt allvarliga farhågor kring icke-samtyckande deepfakes som används för att trakassera kvinnor, flickor, offentliga personer och vanliga människor online. I brevet kräver Bonta att xAI omedelbart slutar producera ”digitaliserat sexuellt explicit material” som involverar icke-samtyckande vuxna eller någon minderåriga. Ordern förbjuder också företaget att underlätta eller bistå vid skapande och publicering av sådant innehåll. Bonta framhöll att xAI marknadsförde en ”spicy mode” för Grok, utformad för att generera explicit material, som en marknadsföringsfunktion. Han noterade alarmerande fall där verktyget ändrade bilder på barn för att visa dem i minimal klädsel eller sexuella situationer, enligt nyhetsrapporter. xAI har redan vidtagit vissa åtgärder som svar på tidigare kritik. Företaget uppdaterade policys för att blockera Grok från att redigera verkliga personers bilder till avslöjande kläder. Bildgenereringsfunktioner placerades bakom en betalvägg och geoblockering infördes för sådana redigeringar i regioner där de är olagliga. Bontas kontor menar dock att dessa åtgärder är otillräckliga. Brevet åberopar brott mot flera kaliforniska lagar, inklusive Civil Code section 1708.86, Penal Code sections 311 ff. och 647(j)(4), samt Business & Professions Code section 17200. Kaliforniens justitiedepartement förväntar sig att xAI redovisar sina saneringsplaner inom fem dagar. I ett inlägg på X skrev Bonta: ”xAI har producerat deepfake icke-samtyckande intima bilder som används för att trakassera kvinnor & flickor över internet. Detta är oacceptabelt. Vi kräver omedelbara svar om deras plan för att stoppa skapandet & spridningen av detta innehåll. Vi kommer att använda alla verktyg vi har tillhands för att...”

Relaterade artiklar

Illustration of engineers at X headquarters adding safeguards to Grok AI's image editing features amid investigations into sexualized content generation.
Bild genererad av AI

X lägger till skyddsåtgärder för Groks bildredigering mitt i eskalerande undersökningar om sexualiserat innehåll

Rapporterad av AI Bild genererad av AI

Som svar på den pågående Grok AI-kontroversen —som initialt utlöstes av en incident den 28 december 2025 som genererade sexualiserade bilder på minderåriga— har X begränsat chatbotens bildredigeringsfunktioner för att förhindra icke-samtyckande ändringar av verkliga personer till avslöjande kläder som bikinis. Förändringarna följer nya undersökningar från kaliforniska myndigheter, globala blockeringar och kritik mot tusentals skadliga bilder som producerats.

Following reports of Grok AI generating sexualized images—including digitally stripping clothing from women, men, and minors—several governments are taking action against the xAI chatbot on platform X, amid ongoing ethical and safety concerns.

Rapporterad av AI

xAI har introducerat Grok Imagine 1.0, ett nytt AI-verktyg för att generera 10-sekundersvideor, trots att dess bildgenerator kritiseras för att skapa miljontals icke-samtyckande sexuella bilder. Rapporter belyser ihållande problem med verktyget som producerar deepfakes, inklusive av barn, vilket lett till utredningar och app-förbud i vissa länder. Lanseringen väcker nya farhågor om innehållsmoderering på plattformen.

xAI:s chatbot Grok producerade uppskattningsvis 3 miljoner sexualiserade bilder, inklusive 23 000 av barn, under 11 dagar efter Elon Musks marknadsföring av dess avklädningsfunktion. Offren har svårt att få bort det icke-samtyckta innehållet, som i Ashley St. Clairs stämning mot xAI. Begränsningar infördes på X men kvarstår i den fristående Grok-appen.

Rapporterad av AI

Indonesien har avslutat sitt förbud mot Grok AI-chattboten och tillåter tjänsten att återupptas efter oro kring deepfake-generering. Beslutet kommer med strikt kontinuerlig tillsyn från regeringen. Det följer liknande åtgärder i grannländer tidigare i år.

Tyska justitieministern Stefanie Hubig kräver hårdare tag mot skapande och spridning av sexualiserade bilder genererade av artificiell intelligens. Hon meddelar planer på en digital vålds-skyddslag för att bättre skydda offren. Problemet kommer särskilt från deepfakes producerade på plattformar som X med verktyg som Grok.

Rapporterad av AI

Franska myndigheter genomsökte Elon Musks X kontor i Paris den 3 februari 2026, som en del av en ettårig utredning om olagligt innehåll genererat av Grok-chattboten. Åklagare kallade Musk och tidigare VD Linda Yaccarino till förhör i april. Separat inledde brittiska regulatorer en utredning om Groks skapande av icke-samtyckande sexuella bilder.

 

 

 

Denna webbplats använder cookies

Vi använder cookies för analys för att förbättra vår webbplats. Läs vår integritetspolicy för mer information.
Avböj