SdcaOptimizer

Rozproszona wersja optymalizatora stochastycznego podwójnego wznoszenia współrzędnych (SDCA) dla

modele liniowe z regularyzacją L1 + L2. Ponieważ cel optymalizacji globalnej jest silnie wypukły, optymalizator optymalizuje cel podwójny na każdym kroku. Optymalizator stosuje każdą aktualizację po jednym przykładzie na raz. Przykłady są próbkowane równomiernie, a optymalizator nie ma szybkości uczenia się i cieszy się współczynnikiem zbieżności liniowej.

[Proksymalne wznoszenie stochastyczne z podwójnymi współrzędnymi] (http://arxiv.org/pdf/1211.2717v1.pdf).
Shai Shalev-Shwartz, Tong Zhang. 2012

$$Loss Objective = \sum f_{i} (wx_{i}) + (l2 / 2) * |w|^2 + l1 * |w|$$

[Dodawanie a uśrednianie w rozproszonej optymalizacji pierwotnej i podwójnej] (http://arxiv.org/abs/1502.03508).
Chenxin Ma, Virginia Smith, Martin Jaggi, Michael I. Jordan, Peter Richtarik, Martin Takac. 2015

[Stochastyczne wznoszenie podwójnych współrzędnych z prawdopodobieństwami adaptacyjnymi] (https://arxiv.org/abs/1502.08053).
Dominik Csiba, Zheng Qu, Peter Richtarik. 2015