Адаптивна поліноміальна функція у глибинних нейронних мережах та алгоритм її навчання

Abstract

Дана робота присвячена дослідженню та розробці адаптивної активаційної функції та алгоритму її навчання. Метою роботи є створення адаптивної поліноміальної активаційної функції – adaptive polynomial activation function (APAF), параметри якої налаштовуються в процесі навчання подібно синаптичним вагам нейрону, покращуючи апроксимуючі властивості не тільки окремого нейрону, а й нейронної мережі в цілому