flux tensoriel : : opérations : : ResourceSparseApplyFtrlV2
#include <training_ops.h>
Mettez à jour les entrées pertinentes dans '*var' selon le schéma Ftrl-proximal.
Résumé
C'est pour les lignes pour lesquelles nous avons grad, nous mettons à jour var, accum et linéaire comme suit : grad_with_shrinkage = grad + 2 * l2_shrinkage * var accum_new = accum + grad_with_shrinkage * grad_with_shrinkage linéaire += grad_with_shrinkage + (accum_new^(-lr_power) - accum^ (-lr_power)) / lr * var quadratique = 1,0 / (accum_new^(lr_power) * lr) + 2 * l2 var = (signe (linéaire) * l1 - linéaire) / quadratique si |linéaire| > l1 sinon 0,0 cumul = accum_new
Arguments :
- scope : un objet Scope
- var : doit provenir d'une variable ().
- cumul : doit provenir d'une variable ().
- linéaire : doit provenir d’une variable().
- grad : Le dégradé.
- indices : Un vecteur d'indices dans la première dimension de var et cumul.
- lr : facteur d’échelle. Ça doit être un scalaire.
- l1 : régularisation L1. Ça doit être un scalaire.
- l2 : régularisation du retrait L2. Ça doit être un scalaire.
- lr_power : facteur d'échelle. Ça doit être un scalaire.
Attributs facultatifs (voir Attrs
) :
- use_locking : Si
True
, la mise à jour des tenseurs var et accum sera protégée par un verrou ; sinon, le comportement n'est pas défini, mais peut présenter moins de conflits.
Retours :
- l'
Operation
créée
Constructeurs et Destructeurs | |
---|---|
ResourceSparseApplyFtrlV2 (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input linear, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input lr, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input l2_shrinkage, :: tensorflow::Input lr_power) | |
ResourceSparseApplyFtrlV2 (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input linear, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input lr, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input l2_shrinkage, :: tensorflow::Input lr_power, const ResourceSparseApplyFtrlV2::Attrs & attrs) |
Attributs publics | |
---|---|
operation |
Fonctions publiques | |
---|---|
operator::tensorflow::Operation () const |
Fonctions statiques publiques | |
---|---|
MultiplyLinearByLr (bool x) | |
UseLocking (bool x) |
Structures | |
---|---|
tensorflow : ops : ResourceSparseApplyFtrlV2 : Attrs | Setters d'attributs facultatifs pour ResourceSparseApplyFtrlV2 . |
Attributs publics
opération
Operation operation
Fonctions publiques
ResourceSparseApplyFtrlV2
ResourceSparseApplyFtrlV2( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input linear, ::tensorflow::Input grad, ::tensorflow::Input indices, ::tensorflow::Input lr, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input l2_shrinkage, ::tensorflow::Input lr_power )
ResourceSparseApplyFtrlV2
ResourceSparseApplyFtrlV2( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input linear, ::tensorflow::Input grad, ::tensorflow::Input indices, ::tensorflow::Input lr, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input l2_shrinkage, ::tensorflow::Input lr_power, const ResourceSparseApplyFtrlV2::Attrs & attrs )
opérateur :: tensorflow :: Opération
operator::tensorflow::Operation() const
Fonctions statiques publiques
MultiplierLinéaireParLr
Attrs MultiplyLinearByLr( bool x )
UtiliserVerrouillage
Attrs UseLocking( bool x )