Ошибки новой модели ИИ от OpenAI GPT-4.5: 37% ответов содержат неточности

Компания OpenAI объявила, что их новейшая языковая модель GPT-4.5 допускает ошибки в содержании в 37% случаев, используя их внутренний инструмент оценки фактологичности SimpleQA. Эта информация, обнародованная в официальном заявлении, вызвала активные обсуждения относительно надёжности современных алгоритмов искусственного интеллекта.

Хотя разработчики говорят о значительных улучшениях — ведь предыдущие версии GPT-4o и o3-mini допускали 61,8% и 80,3% ошибок соответственно, — специалисты акцентируют, что даже «лучшие модели» пока остаются недостаточно точными.

«На сегодняшний день даже самые передовые системы способны создать текст без ошибок лишь в 35% случаев», — отметила Вентинг Чжао, соавтор исследования о когнитивных ошибках ИИ из Корнеллского университета. Этот комментарий подчеркивает фундаментальную проблему: дорогие модели, которыми часто восхищаются как достижениями «человекообразного интеллекта», всё ещё допускают ошибки в элементарных фактах.

OpenAI, чья стоимость оценивается в сотни миллиардов долларов, старается снизить негативную реакцию, подчеркивая уменьшение числа ошибок по сравнению с предыдущими версиями. Однако критики утверждают, что такие сравнения лишь прикрывают застой в развитии технологий. После впечатляющего дебюта ChatGPT компания столкнулась с замедлением прогресса, и, по всей видимости, GPT-4.5 не стал революционным прорывом.

Эксперты сходятся во мнении, что индустрия нуждается в фундаментальных улучшениях для восстановления доверия, а не в косметических обновлениях. Пока пользователи вынуждены мириться с тем, что алгоритмы часто «вымышляют» факты — будь то ответ на простой вопрос или анализ сложных данных.

Источник: iXBT