Новое исследование, проведенное учеными из корпорации Apple в области искусственного интеллекта, выявило значительные недостатки в способности больших языковых моделей к базовому рассуждению. Как сообщает портал Esport.ru, результаты эксперимента показали, что существующие языковые модели, в том числе ChatGPT от OpenAI, сталкиваются с серьезными трудностями в выполнении математических задач.
В рамках тестирования научная команда Apple обнаружила, что даже незначительные изменения в числовых значениях или формулировках задач могут существенно повлиять на результаты выполнения моделью этих задач. Исследование подчеркивает, что производительность всех анализируемых моделей падает, если в вопросе меняются лишь числовые данные. Более того, хрупкость их математических рассуждений демонстрирует, что эффективность работы моделей значительно ухудшается с увеличением количества предложений в вопросе.
Ученые также отмечают, что на текущем этапе развития крупных языковых моделей им недостает навыков формального рассуждения. Вместо этого они, по сути, ориентируются на сопоставление шаблонов, что ограничивает их способность решать более сложные задачи. Эти выводы подчеркивают необходимость дальнейших исследований и улучшений в области разработки искусственного интеллекта, чтобы преодолеть существующие ограничения и повысить уровень рассуждения моделей.
Ранее «ЭкоПравда» информировала о том, что в Бразилии нашли одни из древнейших окаменелостей динозавроморфа.
Городская пыль в Москве наиболее вредной считается в летний период, как заявили специалисты Института геохимии…
Новый вид краба, характерный преимущественно для Атлантики, успешно прижился в водах Азовского моря. По всей…
Звездопады лучше всего наблюдать непосредственно в поле или же на берегу водоема, причем вдали от…
Международные нормативы содержания радионуклидов непосредственно в морской воде, которые помогали бы ученым оценивать так называемый…
Китайские генетики придумали сорт гибридной пшеницы, которая почти на 60-70% превосходит уже существующие сорта данного…
Российские ученые разработали, а также успели запатентовать способ распознавания локальных сейсмических событий непосредственно на территории…