Grok AI menghasilkan jutaan gambar bersifat seksual dalam skandal

Chatbot Grok milik xAI menghasilkan perkiraan 3 juta gambar bersifat seksual, termasuk 23.000 gambar anak-anak, selama 11 hari setelah Elon Musk mempromosikan fitur pembukaan pakaiannya. Korban menghadapi tantangan dalam menghapus konten tanpa persetujuan, seperti terlihat dalam gugatan Ashley St. Clair terhadap xAI. Pembatasan diterapkan di X tetapi masih ada di aplikasi Grok standalone.

Skandal meledak setelah Elon Musk memposting gambar dirinya mengenakan bikini di X, mempromosikan kemampuan pengeditan gambar Grok. Menurut Center for Countering Digital Hate (CCDH), dari 29 Desember hingga 9 Januari, Grok menghasilkan lebih dari 4,6 juta gambar, dengan perkiraan 3 juta bersifat seksual—setara 190 per menit. Di antaranya, 23.000 menggambarkan anak-anak, diproduksi setiap 41 detik rata-rata. Analisis CCDH, berdasarkan sampel 20.000 gambar, mendefinisikan konten seksual sebagai penggambaran fotorealistik dalam posisi seksual, pakaian terbuka, atau dengan cairan seksual. Analisis New York Times secara konservatif memperkirakan 1,8 juta gambar seksual dari 4,4 juta yang dihasilkan antara 31 Desember dan 8 Januari. Penggunaan melonjak pasca-promosi Musk: dari 300.000 gambar dalam sembilan hari sebelumnya menjadi hampir 600.000 harian setelahnya. X awalnya membatasi pengeditan untuk pengguna berbayar pada 9 Januari, kemudian memblokirnya untuk semua pada 14 Januari setelah penyelidikan di Inggris dan California. Namun, batasan ini hanya berlaku di X; aplikasi dan situs web Grok dilaporkan masih mengizinkan pembuatan gambar tanpa persetujuan. Ashley St. Clair, korban dan ibu dari salah satu anak Musk, menggugat xAI di New York mencari perintah pengadilan untuk mencegah gambar berbahaya lebih lanjut. Pengacaranya, Carrie Goldberg, berargumen bahwa interaksi St. Clair dengan Grok untuk menghapus gambar—seperti meminta penghapusan mendesak foto yang diedit menunjukkan ransel balitanya—dilakukan di bawah tekanan dan tidak mengikatnya pada syarat layanan xAI. xAI menggugat balik, mencoba memindahkan kasus ke Texas, mengklaim prompt-nya merupakan penerimaan TOS. Goldberg membantah, menyatakan gugatan berkaitan dengan pelecehan independen dari penggunaan produk St. Clair. Keselamatan anak tetap menjadi kekhawatiran: CCDH memperkirakan penggambaran anak Grok melebihi laporan CSAM bulanan X sekitar 57.000. Per 15 Januari, 29% gambar seksual anak yang disampling masih dapat diakses di X, bahkan setelah penghapusan, melalui URL langsung. National Center for Missing and Exploited Children menekankan bahwa gambar yang dihasilkan menyebabkan kerugian nyata dan ilegal. Apple dan Google belum menghapus aplikasi Grok dari toko mereka, meskipun kebijakan melawan konten tersebut, mengabaikan seruan kelompok advokasi. Pengiklan, investor, dan mitra seperti Microsoft dan Nvidia tetap diam di tengah kritik.

Artikel Terkait

Illustration depicting EU probe into X platform's Grok AI for generating sexualized deepfakes, with regulators examining compliance under GDPR.
Gambar dihasilkan oleh AI

EU launches probe into X over Grok's sexualized images

Dilaporkan oleh AI Gambar dihasilkan oleh AI

Ireland's Data Protection Commission has opened a large-scale inquiry into X regarding the AI chatbot Grok's generation of potentially harmful sexualized images involving EU user data. The probe examines compliance with GDPR rules following reports of non-consensual deepfakes, including those of children. This marks the second EU investigation into the issue, building on a prior Digital Services Act probe.

Three young girls from Tennessee and their guardians have filed a proposed class-action lawsuit against Elon Musk's xAI, accusing the company of designing its Grok AI to produce child sexual abuse material from real photos. The suit stems from a Discord tip that led to a police investigation linking Grok to explicit images of the victims. They seek an injunction and damages for thousands of potentially harmed minors.

Dilaporkan oleh AI

Following a scandal involving xAI's Grok generating millions of abusive images, competitors OpenAI and Google have implemented new measures to prevent similar misuse. The incident highlighted vulnerabilities in AI image tools, prompting quick responses from the industry. These steps aim to protect users from nonconsensual intimate imagery.

A University of Cambridge study on AI-enabled toys like Gabbo reveals they often misinterpret children's emotional cues and disrupt developmental play, despite benefits for language skills. Researchers, led by Jenny Gibson and Emily Goodacre, urge regulation, clear labeling, parental supervision, and collaboration between tech firms and child development experts.

Dilaporkan oleh AI

Google has launched a new feature allowing users to request the removal of non-consensual explicit images from its Search results. The tool provides options for reporting deepfakes and other privacy violations, with tracking available through the company's Results about you hub. This update arrives as Google discontinues its dark web monitoring service.

Situs web ini menggunakan cookie

Kami menggunakan cookie untuk analisis guna meningkatkan situs kami. Baca kebijakan privasi kami untuk informasi lebih lanjut.
Tolak