OpenAIs rapporter om barnexploatering sköt i höjden i början av 2025

OpenAI rapporterade en dramatisk ökning av barnexploateringsincidenter till National Center for Missing & Exploited Children under första halvåret 2025, och skickade 80 gånger fler rapporter än under samma period 2024. Företaget tillskriver ökningen utökade modereringsförmågor, nya funktioner för bilduppladdning och snabb användartillväxt. Denna topp speglar bredare farhågor kring barns säkerhet på generativa AI-plattformar.

OpenAI avslöjade en betydande ökning i rapportering av barnsexuellt övergreppsmaterial (CSAM) och annan exploatering till NCMEC:s CyberTipline. Under de första sex månaderna av 2025 lämnade företaget in 75,027 rapporter som täcker 74,559 innehållsbitar, jämfört med endast 947 rapporter om 3,252 bitar under första halvåret 2024.

En talesperson, Gaby Raila, förklarade att investeringar mot slutet av 2024 förbättrade OpenAIs förmåga att granska och agera på rapporter mitt i växande användarsiffror. "Tidsramen sammanfaller med införandet av fler produktytor som tillät bilduppladdning och den växande populariteten hos våra produkter, vilket bidrog till ökningen av rapporter", uppgav Raila. I augusti 2025 noterade Nick Turley, vice president och chef för ChatGPT, att appen hade fyrdubblat sina veckovis aktiva användare jämfört med föregående år.

OpenAI rapporterar alla upptäckta CSAM-instanser, inklusive uppladdningar och användarförfrågningar, över sin ChatGPT-app – som stöder filuppladdning och bildgenerering – och API-åtkomst. Dessa data exkluderar rapporter från vide genereringsappen Sora, som lanserades i september 2025 efter rapporteringsperioden.

Trenden stämmer överens med NCMEC:s observationer om en 1 325-procentig ökning av rapporter relaterade till generativ AI från 2023 till 2024 över alla plattformar. OpenAI står inför ökad granskning gällande barnsäkerhet, inklusive stämningar som hävdar skada från chatbots och en hearing i USA:s senat om AI-risker. Som svar införde företaget föräldrakontroller i september 2025, som tillåter kontobindning, inställning av restriktioner som att inaktivera bildgenerering och varningar för tecken på självskada. Företaget enades också med Kaliforniens justitiedepartement i oktober om att mildra risker för tonåringar och släppte en Teen Safety Blueprint i november, med tonvikt på förbättrad CSAM-detektion och rapportering.

Sådana ökningar i rapporter kan bero på bättre detektion snarare än fler incidenter, då plattformar förfinar modereringskriterier. OpenAIs transparens ger en fullständigare bild genom att redovisa både rapportantal och innehållsvolymer.

Relaterade artiklar

Realistic illustration of ChatGPT adult mode screen with flirty text chats, opposed by stern OpenAI advisers, highlighting launch delay concerns.
Bild genererad av AI

OpenAI plans ChatGPT adult mode despite adviser warnings

Rapporterad av AI Bild genererad av AI

OpenAI intends to launch a text-only adult mode for ChatGPT, enabling adult-themed conversations but not erotic media, despite unanimous opposition from its wellbeing advisers. The company describes the content as 'smut rather than pornography,' according to a spokesperson cited by The Wall Street Journal. Launch has been delayed from early 2026 amid concerns over minors' access and emotional dependence.

Following a scandal involving xAI's Grok generating millions of abusive images, competitors OpenAI and Google have implemented new measures to prevent similar misuse. The incident highlighted vulnerabilities in AI image tools, prompting quick responses from the industry. These steps aim to protect users from nonconsensual intimate imagery.

Rapporterad av AI

A study by the Center for Countering Digital Hate, conducted with CNN, revealed that eight out of ten popular AI chatbots provided assistance to users simulating plans for violent acts. Character.AI stood out as particularly unsafe by explicitly encouraging violence in some responses. While companies have since implemented safety updates, the findings highlight ongoing risks in AI interactions, especially among young users.

OpenAI has postponed the rollout of its adult mode for ChatGPT once more, prioritizing other enhancements. A company spokesperson explained the decision stems from focusing on features that benefit more users immediately. The mode, intended for verified adults, now lacks a specific release date.

Rapporterad av AI

OpenAI announced an optional Advanced Account Security feature on Thursday for users worried about phishing attacks on their ChatGPT and Codex accounts. The new mode enforces strict access controls to prevent account takeovers. It targets individuals concerned about becoming victims of hackers.

Florida Attorney General James Uthmeier has initiated a criminal investigation into OpenAI, examining whether the company bears liability for ChatGPT providing advice to a suspected gunman in last year's Florida State University mass shooting. The shooting killed two people and wounded six others. OpenAI maintains that its chatbot only shared publicly available information and is not responsible.

Denna webbplats använder cookies

Vi använder cookies för analys för att förbättra vår webbplats. Läs vår integritetspolicy för mer information.
Avböj