Fonction ReLU, équations différentielles linéaires, équation différentielle premier ordre, intégration par rapport au temps, condition initiale, comportement asymptotique, stabilité du système, système dynamique, modèle mathématique, analyse de stabilité, mathématiques appliquées, résolution numérique, équations différentielles ordinaires, théorie des équations différentielles, MReLu(X), condition d'équilibre, analyse mathématique, réseaux de neurones
Le but de cet exercice est de montrer que le réseau de réactions chimiques implémente la fonction ReLu.
[...] En exponentiant, on obtient : où A=eC1 est une nouvelle constante. Pour déterminer la constante A dans la solution de nous devons utiliser la condition initiale. Ainsi, la solution complète pour en fonction du temps est : Cinquième équation Résolvons maintenant l'équation différentielle suivante : Soit, en remplaçant par son expression, nous obtenons l'équation suivante : En intégrant des deux cotés par rapport au temps, on obtient alors : La constante peut être sortie de l'intégrale, on obtient : Soit : Avec C la constante d'intégration. [...]
[...] Etude du comportement de et Lorsque pour que le système soit à l'équilibre, il faut que les termes dans les équations différentielles tendent vers des valeurs constantes ou nulles. Cela signifie que, à l'équilibre : Donc, à l'équilibre, on a : Si est proche de zéro (pour alors soit M est nul, soit tend vers zéro. Autrement dit, le système se stabilise autour de M?ReLu(X)=max(0,X). Nous avons finalement le résultat suivant : La fonction M se comporte bien comme la fonction Relu(0,X) au temps longs. [...]
Source aux normes APA
Pour votre bibliographieLecture en ligne
avec notre liseuse dédiée !Contenu vérifié
par notre comité de lecture