Studie visar att Googles AI Overviews har fel i 10 procent av fallen

En analys från New York Times visar att Googles AI Overviews, som drivs av Gemini, endast svarar korrekt på 90 till 91 procent av frågorna i ett standardiserat test. Detta innebär tiotals miljoner felaktiga svar varje dag i sökresultaten. Google ifrågasätter testets relevans.

New York Times testade i samarbete med startup-företaget Oumi tjänsten AI Overviews med hjälp av SimpleQA, ett testverktyg med över 4 000 frågor som OpenAI släppte 2024. Inledande tester med Gemini 2.5 visade en noggrannhet på 85 procent, vilket förbättrades till 91 procent efter uppdateringen till Gemini 3. Om man extrapolerar detta till Googles totala sökvolym innebär det tiotals miljoner felaktiga svar varje dag, eller miljontals per timme, vilket framhålls i rapporter om resultaten.

Relaterade artiklar

Illustration of Swedes in a Stockholm cafe using AI chatbots amid survey stats on rising usage and skepticism.
Bild genererad av AI

Increased AI chatbot use among Swedes – but also concerns

Rapporterad av AI Bild genererad av AI

According to the latest SOM survey from the University of Gothenburg, the share of Swedes chatting with an AI bot weekly rose from 12 to 36 percent between 2024 and 2025. At the same time, skepticism toward AI has grown, with 62 percent viewing it as a greater risk than opportunity for society.

Researchers from the University of Pennsylvania have identified 'cognitive surrender,' where people outsource reasoning to AI without verification. In experiments, participants accepted incorrect AI responses 73.2 percent of the time across 1,372 participants. Factors like time pressure increased reliance on flawed outputs.

Rapporterad av AI

Certain search terms appear to disrupt Google's AI Overviews results.

Google is expanding its AI-driven search tools with new agent capabilities and a redesigned interface. The changes, unveiled at the company’s I/O 2026 event, aim to make search more conversational and interactive. Executives say the updates reflect a broader shift where AI is central to how users find information.

Rapporterad av AI

Google unveiled a wave of AI-driven updates for Android devices and introduced Googlebooks, a new line of laptops, during its Android Show presentation on Tuesday. The announcements focus on proactive AI features through Gemini Intelligence and enhanced integration across phones, cars and computers.

Denna webbplats använder cookies

Vi använder cookies för analys för att förbättra vår webbplats. Läs vår integritetspolicy för mer information.
Avböj