Новое исследование, проведенное учеными из корпорации Apple в области искусственного интеллекта, выявило значительные недостатки в способности больших языковых моделей к базовому рассуждению. Как сообщает портал Esport.ru, результаты эксперимента показали, что существующие языковые модели, в том числе ChatGPT от OpenAI, сталкиваются с серьезными трудностями в выполнении математических задач.
В рамках тестирования научная команда Apple обнаружила, что даже незначительные изменения в числовых значениях или формулировках задач могут существенно повлиять на результаты выполнения моделью этих задач. Исследование подчеркивает, что производительность всех анализируемых моделей падает, если в вопросе меняются лишь числовые данные. Более того, хрупкость их математических рассуждений демонстрирует, что эффективность работы моделей значительно ухудшается с увеличением количества предложений в вопросе.
Ученые также отмечают, что на текущем этапе развития крупных языковых моделей им недостает навыков формального рассуждения. Вместо этого они, по сути, ориентируются на сопоставление шаблонов, что ограничивает их способность решать более сложные задачи. Эти выводы подчеркивают необходимость дальнейших исследований и улучшений в области разработки искусственного интеллекта, чтобы преодолеть существующие ограничения и повысить уровень рассуждения моделей.
Ранее «ЭкоПравда» информировала о том, что в Бразилии нашли одни из древнейших окаменелостей динозавроморфа.
Российские исследователи выявили генетические фрагменты нескольких ранее неизвестных видов бактерий при повторном анализе образцов воды…
Ученые Новгородского государственного университета имени Ярослава Мудрого (НовГУ) совместно с исследователями РГАУ — МСХА имени…
Российские исследователи разработали метод, позволяющий установить максимальную дальность проникновения цунами на сушу даже в тех…
Исследователи Арктического и антарктического научно-исследовательского института (ААНИИ) выяснили, что на интенсивность таяния ледников влияют не…
Российские и казахстанские исследователи установили, что образование мерзлоты в пятом Пазырыкском кургане на Горном Алтае…
Высота Монблана, расположенного на границе Франции и Италии, достигла 4807,47 м. По сравнению с результатами…