lớp cuối cùng công khai ResourceApplyProximalAdagrad
Cập nhật '*var' và '*accum' theo FOBOS với tốc độ học tập của Adagrad.
accum += grad grad prox_v = var - lr grad (1 / sqrt(accum)) var = sign(prox_v)/(1+lr l2) max{|prox_v|-lr l1,0}
Các lớp lồng nhau
lớp học | ResourceApplyProximalAdagrad.Options | Thuộc tính tùy chọn cho ResourceApplyProximalAdagrad |
Hằng số
Sợi dây | OP_NAME | Tên của op này, được biết đến bởi công cụ lõi TensorFlow |
Phương pháp công cộng
tĩnh <T mở rộng TType > ResourceApplyProximalAdagrad | |
tĩnh ResourceApplyProximalAdagrad.Options | useLocking (Boolean useLocking) |
Phương pháp kế thừa
Hằng số
Chuỗi cuối cùng tĩnh công khai OP_NAME
Tên của op này, được biết đến bởi công cụ lõi TensorFlow
Giá trị không đổi: "ResourceApplyProximalAdagrad"
Phương pháp công cộng
public static ResourceApplyProximalAdagrad tạo ( Phạm vi phạm vi , Toán hạng <?> var, Toán hạng <?> accum, Toán hạng <T> lr, Toán hạng <T> l1, Toán hạng <T> l2, Toán hạng <T> grad, Tùy chọn... tùy chọn)
Phương thức xuất xưởng để tạo một lớp bao bọc một hoạt động ResourceApplyProximalAdagrad mới.
Thông số
phạm vi | phạm vi hiện tại |
---|---|
var | Phải từ một Biến(). |
tích lũy | Phải từ một Biến(). |
lr | Yếu tố nhân rộng. Phải là một vô hướng. |
l1 | Chính quy hóa L1. Phải là một vô hướng. |
l2 | Chính quy hóa L2. Phải là một vô hướng. |
tốt nghiệp | Độ dốc. |
tùy chọn | mang các giá trị thuộc tính tùy chọn |
Trả lại
- một phiên bản mới của ResourceApplyProximalAdagrad
public static ResourceApplyProximalAdagrad.Options useLocking (Boolean useLocking)
Thông số
sử dụngKhóa | Nếu Đúng, việc cập nhật các tensor var và accum sẽ được bảo vệ bằng khóa; mặt khác, hành vi không được xác định, nhưng có thể ít gây tranh cãi hơn. |
---|