Top.Mail.Ru
Функция активации E...
 
Уведомления
Очистить все

[Решено] Функция активации ELU

UniX
 UniX
(@unix)
New member

Всех приветствую,

хочу протестировать в качестве функции активации Exponential Linear Unit. Вопрос такой, что брать в качестве производной? Ведь функция по сути представляет из себя две разные функции для x<0 и x>0:

1 RD0lIYqB5L2LrI2VTIZqGw
Цитата
Создатель темы Размещено : 15.06.2021 21:51
AI
 AI
(@ai)
Level 3 Moderator

И производная также - разные функции для разных диапазонов аргументов:

ELU

Вот хорошая статья с примерами функций активации и их производных: https://mlfromscratch.com/activation-functions-explained/

 

ОтветитьЦитата
Размещено : 16.06.2021 17:34
UniX
 UniX
(@unix)
New member
От: @ai

И производная также - разные функции для разных диапазонов аргументов:

ELU

Вот хорошая статья с примерами функций активации и их производных: https://mlfromscratch.com/activation-functions-explained/

 

Понял, за ссылку отдельное спасибо)

ОтветитьЦитата
Создатель темы Размещено : 16.06.2021 18:26
Поделиться: