Новое исследование, проведенное учеными из корпорации Apple в области искусственного интеллекта, выявило значительные недостатки в способности больших языковых моделей к базовому рассуждению. Как сообщает портал Esport.ru, результаты эксперимента показали, что существующие языковые модели, в том числе ChatGPT от OpenAI, сталкиваются с серьезными трудностями в выполнении математических задач.
В рамках тестирования научная команда Apple обнаружила, что даже незначительные изменения в числовых значениях или формулировках задач могут существенно повлиять на результаты выполнения моделью этих задач. Исследование подчеркивает, что производительность всех анализируемых моделей падает, если в вопросе меняются лишь числовые данные. Более того, хрупкость их математических рассуждений демонстрирует, что эффективность работы моделей значительно ухудшается с увеличением количества предложений в вопросе.
Ученые также отмечают, что на текущем этапе развития крупных языковых моделей им недостает навыков формального рассуждения. Вместо этого они, по сути, ориентируются на сопоставление шаблонов, что ограничивает их способность решать более сложные задачи. Эти выводы подчеркивают необходимость дальнейших исследований и улучшений в области разработки искусственного интеллекта, чтобы преодолеть существующие ограничения и повысить уровень рассуждения моделей.
Ранее «ЭкоПравда» информировала о том, что в Бразилии нашли одни из древнейших окаменелостей динозавроморфа.
Ученые Тверского государственного технического университета (ТвГТУ) занимают разработкой технологии экологичной утилизации твердых бытовых отходов (ТБО)…
Ученые Южно-Уральского государственного университета (ЮУрГУ) рекомендовали накануне жителям Челябинска как можно чаще проводить влажную уборку…
Палеонтологи нашли в ходе раскопок на севере США останки мозазавра, чей химический состав чьих зубов…
Северные популяции косаток способны использовать дельфинов непосредственно для совместной охоты. Об этом сообщается в статье…
Уровень сейсмичности непосредственно на Камчатке снова повысился, при этом до сих пор продолжаются афтершоки силой…
Вспышка так называемого предпоследнего класса - М4.4 - была зафиксирована на Солнце непосредственно в ночь…