Atualize '*var' de acordo com o algoritmo Adam.
$$lr_t := \text{learning\_rate} * \sqrt{1 - beta_2^t} / (1 - beta_1^t)$$$$m_t := beta_1 * m_{t-1} + (1 - beta_1) * g$$$$v_t := beta_2 * v_{t-1} + (1 - beta_2) * g * g$$$$variable := variable - lr_t * m_t / (\sqrt{v_t} + \epsilon)$$
Classes aninhadas
aula | AplicarAdam.Options | Atributos opcionais para ApplyAdam |
Constantes
Corda | OP_NAME | O nome desta operação, conforme conhecido pelo mecanismo principal do TensorFlow |
Métodos Públicos
Saída <T> | asOutput () Retorna o identificador simbólico do tensor. |
estático <T estende TType > ApplyAdam <T> | create ( Escopo do escopo, Operando <T> var, Operando <T> m, Operando <T> v, Operando <T> beta1Power, Operando <T> beta2Power, Operando <T> lr, Operando <T> beta1, Operando <T > beta2, Operando <T> épsilon, Operando <T> grad, Opções... opções) Método de fábrica para criar uma classe que envolve uma nova operação ApplyAdam. |
Saída <T> | fora () O mesmo que "var". |
ApplyAdam.Options estático | useLocking (booleano useLocking) |
ApplyAdam.Options estático | useNesterov (booleano useNesterov) |
Métodos herdados
Constantes
String final estática pública OP_NAME
O nome desta operação, conforme conhecido pelo mecanismo principal do TensorFlow
Métodos Públicos
Saída pública <T> asOutput ()
Retorna o identificador simbólico do tensor.
As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.
public static ApplyAdam <T> create ( Escopo escopo, Operando <T> var, Operando <T> m, Operando <T> v, Operando <T> beta1Power, Operando <T> beta2Power, Operando <T> lr, Operando <T > beta1, Operando <T> beta2, Operando <T> épsilon, Operando <T> grad, Opções... opções)
Método de fábrica para criar uma classe que envolve uma nova operação ApplyAdam.
Parâmetros
escopo | escopo atual |
---|---|
var | Deve ser de uma variável(). |
eu | Deve ser de uma variável(). |
v | Deve ser de uma variável(). |
beta1Power | Deve ser um escalar. |
beta2Power | Deve ser um escalar. |
lr | Fator de escala. Deve ser um escalar. |
beta1 | Fator de impulso. Deve ser um escalar. |
beta2 | Fator de impulso. Deve ser um escalar. |
épsilon | Termo de cume. Deve ser um escalar. |
graduado | O gradiente. |
opções | carrega valores de atributos opcionais |
Devoluções
- uma nova instância de ApplyAdam
public static ApplyAdam.Options useLocking (booleano useLocking)
Parâmetros
useLocking | Se `True`, a atualização dos tensores var, m e v será protegida por um bloqueio; caso contrário, o comportamento será indefinido, mas poderá apresentar menos contenção. |
---|
public static ApplyAdam.Options useNesterov (booleano useNesterov)
Parâmetros
usarNesterov | Se `True`, usa a atualização desterov. |
---|