W jaki sposób wzmocnienie gradientu przypomina opadanie gradientu?

Załóżmy, że jesteśmy w następującej sytuacji. Mamy pewne dane , gdzie każdy może być liczbą lub wektorem, i chcielibyśmy wyznaczyć funkcję która aproksymuje zależność , w tym sensie, że najmniejsze kwadraty błąd: $\{ x_i, y_i \}$ $x_i$ $f$ $f(x_i) \approx y_i$

\frac{1}{2} \sum_{i} (y_{i} - f (x_{i}))^{2}

$\frac{1}{2} \sum_i (y_i - f(x_i))^2$

jest mały.

Teraz pojawia się pytanie, czym chcielibyśmy być domeną . Zdegenerowany wybór dla domeny to tylko punkty w naszych danych szkoleniowych. W takim przypadku możemy po prostu zdefiniować , obejmując całą pożądaną domenę, i gotowe. Okrągłym sposobem na uzyskanie tej odpowiedzi jest zejście gradientowe z tą dyskretną przestrzenią jako domeną. To wymaga nieco zmiany punktu widzenia. Spójrzmy na stratę jako funkcję punktu prawdziwego i prognozy (na razie nie jest funkcją, ale tylko wartością prognozy) $f$ $f(x_i) = y$ $y$ $f$ $f$

L (f; y) = \frac{1}{2} (y - f)^{2}

$L(f; y) = \frac{1}{2} (y - f)^2$

a następnie weź gradient w stosunku do prognozy

\nabla_{f} L (f; y) = f - y

$\nabla_f L(f; y) = f - y$

Następnie aktualizacja gradientu, zaczynając od wartości początkowej wynosi $y_0$

y_{1} = y_{0} - \nabla_{f} (y_{0}, y) = y_{0} - (y_{0} - y) = y

$y_1 = y_0 - \nabla_f (y_0, y) = y_0 - (y_0 - y) = y$

Dzięki tej konfiguracji odzyskujemy nasze idealne prognozy w kroku gradientu, co jest miłe!

Błąd tu jest, oczywiście, że chcemy należy określić na wiele więcej niż tylko nasze punkty danych szkolenia. Aby to zrobić, musimy zrobić kilka ustępstw, ponieważ nie jesteśmy w stanie ocenić funkcji straty ani jej gradientu w żadnym innym punkcie niż nasz zestaw danych treningowych. $f$

Wielka idea jest słabo przybliżonej . $\nabla L$

Startz początkowym domysłem przy , prawie zawsze prostą stałą funkcją , jest to zdefiniowane wszędzie. Teraz wygeneruj nowy działający zestaw danych, oceniając gradient funkcji utraty na danych treningowych, używając wstępnej domysły dla : $f$ $f(x) = f_0$ $f$

W = {x_{i}, f_{0} - y}

$W = \{ x_i, f_0 - y \}$

Now approximate $\nabla L$ montując słabą uczący się . Powiedzieć otrzymujemy przybliżenie . Uzyskaliśmy rozszerzenie danych w całej domenie w postaci , chociaż straciliśmy precyzję w punktach treningowych, ponieważ pasujemy do małego ucznia. $W$ $F \approx \nabla L$ $W$ $F(X)$

Finally, użyj zamiast w aktualizacji gradientu w całej domenie: $F$ $\nabla L$ $f_0$

f_{1} (x) = f_{0} (x) - F (x)

$f_1(x) = f_0(x) - F(x)$

się z , nowego przybliżenia , nieco lepszego niż . Zacznij od i iteruj, aż będziesz zadowolony. $f_1$ $f$ $f_0$ $f_1$

Mamy nadzieję, że widać, że naprawdę ważne jest przybliżenie gradientu straty. W przypadku minimalizacji metodą najmniejszych kwadratów przyjmuje to postać surowych reszt, ale w bardziej wyrafinowanych przypadkach nie. Maszyna wciąż jednak obowiązuje. Tak długo, jak można zbudować algorytm do obliczania utraty i gradientu strat na danych treningowych, możemy użyć tego algorytmu do przybliżenia funkcji minimalizującej tę stratę.

Matthew Drury
źródło

Tak, myślę, że to dobrze. Jedyną rzeczą do odnotowania jest to, że jeśli na przykład chcesz zwiększyć, aby zminimalizować straty dwumianowe wówczas rozwinięty gradient nie jest już związane z resztkami w naturalny sposób.

\sum_{i} y_{i} \log (p_{i}) + (1 - y_{i}) \log (1 - p_{i})

$\sum_i y_i \log (p_i) + (1 - y_i) \log(1 - p_i)$

Matthew Drury,

Dzięki Matthew. Jedną rzecz, którą staram się rozwiązać. W literaturze często stwierdza się, że aktualizacja modelu to F (m + 1) = F (m) + , gdzie h (m) jest słabym uczniem. Jeśli mam na myśli model oparty na drzewie - czy oznacza to, że zarówno w przypadku regresji, jak i klasyfikacji faktycznie faktycznie aktualizujemy nasze prognozy dla danego punktu danych poprzez proste dodanie wyników dwóch modeli? czy to też działa, jeśli próbujemy to binarnie sklasyfikować? a może znak + nie powinien być interpretowany dosłownie?

α_{m} * h (m)

$\alpha_m*h(m)$

Wouter

Znak plus jest dosłowny. Jednak w przypadku słabych uczniów opartych na drzewie prognozy modelu należy interpretować jako średnią ważoną w liściu, nawet w przypadku, gdy drzewo jest odpowiednie do danych dwumianowych. Zauważ jednak, że podczas wzmacniania zwykle nie dopasowujemy się do danych dwumianowych, dopasowujemy się do gradientu prawdopodobieństwa oszacowanego na podstawie prognoz z poprzedniego etapu, który nie będzie wyceniony na .

0, 1

$0,1$

Matthew Drury,

@MatthewDrury myślę w wielu literaturze, nie są bezpośrednim zmiana z , a z , w którym od 0 do 1, jest szybkość uczenia się.

f_{1}

$f_1$

f_{0} - F (x)

$f_0-F(x)$

f_{0} - α * F (x)

$f_0-\alpha*F(x)$

α

$\alpha$

Haitao Du

@ hxd1011 Tak, jest to absolutnie poprawne i kluczowe dla skutecznego zwiększenia gradientu.

Matthew Drury

W jaki sposób wzmocnienie gradientu przypomina opadanie gradientu?

Odpowiedzi: