ИИ-боты дают неверные финансовые советы в 57% случаев - исследование

Технологическая компания Saturn провела исследование и выяснила, что популярные модели искусственного интеллекта дают ошибочные ответы на финансовые вопросы в среднем в 57% случаев. На сложных вопросах, требующих нескольких вычислений, частота ошибок возрастает до 88%, а у некоторых моделей достигает 99%, пишет Reuters.

В рамках исследования 18 нейромоделей, включая ChatGPT, Claude, Copilot, Grok и Gemini, отвечали на 121 финансовый вопрос. Каждый вопрос задавался по пять раз, всего было получено более 10 тысяч ответов. Бесплатные версии ошибались в 63% случаев, платные — в 49%. На самых сложных вопросах бесплатные модели давали сбой в 93% случаев.

Среди типичных ошибок: сбои в расчётах, пропуск предупреждений о рисках, игнорирование предстоящих изменений в налогах и выдумывание несуществующих правил. Одна из моделей дала неверный совет по пенсионному налогу, который мог обернуться штрафом в 17 500 фунтов стерлингов. Другая посоветовала должнику не оплачивать аренду ради погашения кредита, что грозило выселением.

«Миллионы людей доверяют моделям искусственного интеллекта в вопросах финансов, но получают неверные ответы, которые могут дорого им стоить», - заявил исполнительный директор Saturn Амаль Джолли.

Лучший результат показала модель Claude Opus 5 в режиме рассуждений — 39% ошибок. Однако даже этот показатель признан недостаточным для работы с финансами без контроля человека.

Фото сгенерировано ИИ