Новое исследование, проведенное учеными из корпорации Apple в области искусственного интеллекта, выявило значительные недостатки в способности больших языковых моделей к базовому рассуждению. Как сообщает портал Esport.ru, результаты эксперимента показали, что существующие языковые модели, в том числе ChatGPT от OpenAI, сталкиваются с серьезными трудностями в выполнении математических задач.
В рамках тестирования научная команда Apple обнаружила, что даже незначительные изменения в числовых значениях или формулировках задач могут существенно повлиять на результаты выполнения моделью этих задач. Исследование подчеркивает, что производительность всех анализируемых моделей падает, если в вопросе меняются лишь числовые данные. Более того, хрупкость их математических рассуждений демонстрирует, что эффективность работы моделей значительно ухудшается с увеличением количества предложений в вопросе.
Ученые также отмечают, что на текущем этапе развития крупных языковых моделей им недостает навыков формального рассуждения. Вместо этого они, по сути, ориентируются на сопоставление шаблонов, что ограничивает их способность решать более сложные задачи. Эти выводы подчеркивают необходимость дальнейших исследований и улучшений в области разработки искусственного интеллекта, чтобы преодолеть существующие ограничения и повысить уровень рассуждения моделей.
Ранее «ЭкоПравда» информировала о том, что в Бразилии нашли одни из древнейших окаменелостей динозавроморфа.
Начало весьма длительной серии геомагнитных возмущений ожидается в нынешнюю пятницу из-за сформировавшейся непосредственно на Солнце…
Специалисты НИУ "МЭИ" создали небольшую мобильную гидроэлектростанцию, за счет которой можно получать электричество от течения…
Специалисты МГУ им. М. В. Ломоносова создали специальный наносенсор, способный определять содержание в воде одновременно…
Птицеводческая компания будет выплачивать 250 млн рублей непосредственно для возмещения вреда, причиненного местной реке Граевке…
Ученые в Томске придумали недорогой катализатор непосредственно для выделения водорода из сельскохозяйственных отходов, таких как…
Беспилотные летательные аппараты впервые были использованы для оценки запасов кормовой базы непосредственно для рыбы в…