Statystyki i duże zbiory danych

20
Algorytm EM ręcznie wdrożony

Chcę, aby zaimplementować algorytm EM ręcznie, a następnie porównać je do wyników działań normalmixEMz mixtoolsopakowania. Oczywiście byłbym szczęśliwy, gdyby oba doprowadziły do ​​tych samych rezultatów. Głównym odniesieniem jest Geoffrey McLachlan (2000), Finite Mixture Models . Mam gęstość...

20
Co to jest cykliczne uczenie się zbrojenia

Ostatnio natknąłem się na słowo „Recurrent Reinforcement Learning”. Rozumiem, czym jest „Recurrent Neur Network” i czym jest „Reinforcement Learning”, ale nie mogłem znaleźć wielu informacji na temat tego, czym jest „Recurrent Reinforcement Learning”. Czy ktoś może mi wyjaśnić, czym jest „uczenie...

20
Motywacja algorytmu maksymalizacji oczekiwań

W podejściu algorytmu EM wykorzystujemy nierówność Jensena do uzyskania logp(x|θ)≥∫logp(z,x|θ)p(z|x,θ(k))dz−∫logp(z|x,θ)p(z|x,θ(k))dzlog⁡p(x|θ)≥∫log⁡p(z,x|θ)p(z|x,θ(k))dz−∫log⁡p(z|x,θ)p(z|x,θ(k))dz\log p(x|\theta) \geq \int \log p(z,x|\theta) p(z|x,\theta^{(k)}) dz - \int \log p(z|x,\theta)...

20
Łagodniejsze podejście do statystyki bayesowskiej

Niedawno zacząłem czytać „Wprowadzenie do statystyki bayesowskiej” 2. wydanie Bolstad. Miałem klasę statystyk wprowadzających, która obejmowała głównie testy statystyczne i prawie przechodzę klasę w analizie regresji. Jakich innych książek mogę użyć, aby uzupełnić moje zrozumienie tej? Udało mi...

20
Oblicz średnią zmiennej porządkowej

Czytałem w wielu miejscach, że obliczanie średniej zmiennej porządkowej jest niewłaściwe. Próbuję uzyskać intuicję, dlaczego może to być nieodpowiednie. Myślę, że dzieje się tak, ponieważ generalnie zmienna porządkowa nie jest normalnie rozkładana, a zatem obliczenie średniej da niedokładną...

20
Różnica między ANOVA a testem Kruskala-Wallisa

Uczę się R i eksperymentowałem z analizą wariancji. Prowadziłem oba kruskal.test(depVar ~ indepVar, data=df) i anova(lm(depVar ~ indepVar, data=dF)) Czy istnieje praktyczna różnica między tymi dwoma testami? Rozumiem, że oboje oceniają hipotezę zerową, że populacje mają ten sam środek....

20
Przedział ufności RMSE

Pobrałem próbkę punktów danych z populacji. Każdy z tych punktów ma prawdziwą wartość (znaną z podstawowej prawdy) i wartość szacunkową. Następnie obliczam błąd dla każdego próbkowanego punktu, a następnie obliczam RMSE próbki.nnn Jak mogę wnioskować o pewnym przedziale ufności wokół tego RMSE na...

20
Statystyki to nie matematyka?

Czy statystyki są matematyczne, czy nie? Biorąc pod uwagę, że są to wszystkie liczby, głównie nauczane przez działy matematyki, a dostaniesz za to kredyty matematyczne, zastanawiam się, czy ludzie mają na myśli żart, kiedy to mówią, na przykład mówiąc, że to niewielka część matematyki, czy tylko...