Дослідження ЮНЕСКО та UCL виявило вразливість ШІ у кліматичних темах
Моделі штучного інтелекту загалом правильно відповідають на базові запитання про клімат, однак можуть відмовлятися від коректних відповідей під тиском користувача та помилятися в складному аналізі кліматичної політики. Таких висновків дійшли ЮНЕСКО та Університетський коледж Лондона в дослідженні, про яке повідомляє BBC News.
Дослідники оцінили 33 моделі ШІ, а п'ять із них протестували 13 мовами. Під час перевірки базових фактів найкращі моделі давали правильні відповіді у 88–96% випадків. Водночас у завданнях, де потрібно було визначити, чи підтверджують або спростовують докази певне твердження, точність найкращих моделей знижувалася до 71–77%.
Коли користувачі неодноразово заперечували правильну відповідь, точність моделей падала на 31–35 відсоткових пунктів. Приблизно у 80% випадків, коли модель поступалася хибній позиції співрозмовника, це відбувалося вже після першого висловленого заперечення. Усі моделі, які перевіряли на стійкість до такого тиску, зрештою приймали неправильну думку користувача після повторних заперечень.
Складніші запитання про кліматичну політику також виявилися проблемними для систем. Коли моделі питали про вплив однієї політики на глобальну температуру у 2100 році, точність відповідей сягала 94,5%. Але за поєднання кількох політик середній показник впав до 33,8%.
Якість відповідей різнилася й залежно від мови. Для англійської, іспанської, французької та португальської точність перевищувала 88%. У бенгальській та гінді вона становила 83,6%, в урду — 81,4%, а у суахілі — 78,3%. Провідна авторка звіту, професорка Івана Дробняк із UCL Computer Science, зазначила, що ШІ не є надійною заміною науковців і кваліфікованих експертів.
- Останні
- Популярні
Новини по днях
17 листопада 2026