対話型AIがユーザーの誤った信念や歪んだ思考を強める可能性があることが、新たな研究で示された。この調査結果は、妄想や陰謀論を抱える人々とのチャットボットの対話手法を検証した研究によるもの。研究チームは、孤立している人や脆弱な立場にあるユーザーにとって特にリスクが高いと警告している。
エクセター大学のルーシー・オスラー氏は、生成AIシステムが会話を通じていかにして誤った信念を助長し得るかを分析した。同研究は分散認知理論に基づき、AIはユーザーの現実に対する不正確な解釈に異議を唱えるのではなく、それを肯定し拡大させる傾向があることを明らかにしている。