Штучний інтелект перевершив людину в розумінні мови

Модель штучного інтелекту (ШІ) Microsoft перевершила людину в тесті SuperGLUE на розуміння природної мови. Модель набрала 90,3 бала, а людина — 89,8.

Модель штучного інтелекту Microsoft називається DeBERTa (Decoding-enhanced BERT with disentangled attention). Вона проходила тест SuperGLUE, що складається з восьми завдань. Ці завдання пов’язані з розумінням структури тексту, його контексту і причинно-наслідкових зв’язків в ньому.

Наприклад, ШІ потрібно було вибрати правильну відповідь на питання «в чому причина цього?» за пропозицією «дитина стала несприйнятливою до хвороби». Моделі дали два варіанти відповіді: «вона уникнула контакту з хворобою» і «вона отримала вакцину від хвороби». Людина без проблем вибере правильну відповідь, але для ШІ це нетривіальне завдання.

Повідомляється, що високих результатів для DeBERTa компанія Microsoft досягла менш ніж за два роки.