Исследователи: поисковики с ИИ дают неверные ответы в тревожных 60% случаев

Новое исследование Центра цифровой журналистики при Колумбийском университете выявило серьезные проблемы с точностью моделей генеративного ИИ, используемых для поиска новостей. В ходе исследования были протестированы восемь инструментов поиска на основе ИИ с функцией живого поиска, и было обнаружено, что модели ИИ неверно ответили на более чем 60% запросов по новостным материалам.

Исследователи Клаудия Яжвинска (Klaudia Jaźwińska) и Айшвария Чандрасекар (Aisvarya Chandrasekar) отметили в своем отчете, что примерно каждый четвертый американец сейчас использует модели ИИ в качестве альтернативы традиционным поисковым системам. Это вызывает серьезные опасения по поводу надежности, учитывая существенный процент ошибок, выявленный в ходе исследования.

Процент ошибок заметно варьировался среди протестированных платформ. Perplexity предоставил неверную информацию в 37% протестированных запросов, в то время как ChatGPT Search неверно идентифицировал 67% (134 из 200) запрошенных статей. Grok 3 продемонстрировал самый высокий процент ошибок — 94%.