Rectified linear unitRedresseur (réseaux neuronaux)
Type of activation functionLa fonction 𝑓 définie par 𝑓(𝑥)=max{0, 𝑥}
In the context of artificial neural networks, the rectifier or ReLU activation function is an activation function defined as the non-negative part of its argument, i.e., the ramp function:En mathématiques, la fonction Unité Linéaire Rectifiée est définie pour tout réel x {\displaystyle x}: ∀ x ∈ R, f = max {\displaystyle \forall x\in \mathbb {R},\ f=\max} Elle est fréquemment utilisée comme fonction d'activation dans le…
