Нейросеть навчили грати в Doom

Шутер Doom давно став не просто грою, а своєрідним бенчмарком для перевірки можливостей та потужності пристроїв. Його портували на всі можливі операційні системи та архітектури ПК. Наприклад, він є на Raspberry Pi Pico. Але тепер, як виявилось, розробникам мало й цього. Вони навчили ШІ грати в Doom, при цьому споживання енергії виявилося незначним.

Для роботи використовували нейрочіп Syntiant NDP200, який споживає всього 1/1000 Вт. Цим чіп використовується для нейронних мереж, а точніше він застосовується для моніторингу відео та аудіо. NDP200 може працювати на частоті до 100 МГц та має 26 контактів GPIO.

В рамках проведеного експерименту нейромережу навчили за допомогою VizDoom, версії Doom, що використовується для досліджень ШІ та навчання з підкріпленням на основі необробленої візуальної інформації. Сама нейромережа складалася приблизно 600 000 параметрів, яким вистачило 640 КБ ОЗУ на мікросхемі NDP200.

Нейромережі потрібно було навчитися грати в Doom, при цьому основним завданням була не сама гра, а демонстрація ефективності NDP200 при такому малому споживанні енергії.