Analyse du code de base de pytorch_forward_forward : de la classe Layer à la construction des échantillons positifs et négatifs
La rétropropagtaion traditionnelle nécesssite une propagation en avant suivie d'une propagation en arrière de l'erreur. En revanche, l'algorithme Forward-Forward (FF) effectue l'entraînement entièrement par propagation en avant. Dans l'algorithme FF, chaque couche a sa propre fonction de perte et son optimiseur, permettant un entraînement par c ...
Publié le 7 août à 22h54