В финансовых вопросах искусственный интеллект ChatGPT является лучшим, но полностью полагаться на него не стоит — исследование

Вашингтонский государственный университет провел исследование финансовой грамотности искусственного интеллекта. В нем были проанализированы ответы моделей ChatGPT, BARD и Llama на более чем 10 000 вопросов из финансовых экзаменов. Помимо выбора правильных ответов, исследователи оценивали способность моделей давать объяснения.

Лучший — ChatGPT 4.0

Согласно результатам исследования, ChatGPT 4.0 показал лучшие результаты среди всех моделей, однако даже он давал неправильные ответы на сложные финансовые вопросы.

ChatGPT оказался эффективным в объяснении общих финансовых понятий, но не всегда был надежен при решении сложных и специфических задач. Несмотря на то что версия ChatGPT 4.0 показала самые высокие результаты, версия ChatGPT 3.5 благодаря правильным ответам и объяснениям оказалась близка к ней. Исследователи подчеркнули, что ChatGPT может быть полезным помощником для профессионалов, но не способен полностью их заменить.

С какими проблемами столкнулся искусственный интеллект?

Как отмечается, при ответах на вопросы финансовых лицензионных экзаменов ChatGPT хорошо объяснял общие концепции, но был недостаточно эффективен в специфических и уникальных случаях. Например, модели хорошо справлялись с задачами, связанными с анализом трендов на финансовых рынках, но испытывали трудности с такими вопросами, как налоговый статус или страхование клиентов. По мнению исследователей, прежде чем полностью доверять искусственному интеллекту, необходимо улучшить его способность решать сложные задачи.

ChatGPT 3.5 в некоторых случаях превзошел модель 4.0

В ходе исследования было отмечено, что результаты модели ChatGPT 3.5 значительно улучшились благодаря обучению на основе правильных ответов и объяснений. В некоторых случаях она даже превосходила модель ChatGPT 4.0. Исследователи продолжают искать эффективные способы использования таких моделей.

Искусственный интеллект не заменит специалистов

По мнению исследователей, ИИ может открыть новые возможности в финансовой сфере, но такие модели не являются надежными в задачах, требующих специфической экспертизы. ChatGPT можно использовать в основном для объяснения общих понятий, но он не способен заменить консультации специалистов. Искусственный интеллект скорее выступает в роли помощника и может оказывать влияние на процессы создания новых рабочих мест.

ИИ может негативно повлиять на начальные рабочие места

Согласно результатам исследования, автоматизация некоторых простых задач в финансовой сфере с помощью ИИ может негативно сказаться на начальных рабочих местах. Например, банки и финансовые организации могут сократить прием новых сотрудников, заменяя их автоматизированными процессами. Это, в свою очередь, может способствовать улучшению производственных процессов в финансовой отрасли.