Obecnie próbuję zrozumieć zasadę wiarygodności i, szczerze mówiąc, wcale jej nie rozumiem. Tak więc napiszę wszystkie moje pytania jako listę, nawet jeśli mogą to być dość podstawowe pytania.
- Co dokładnie oznacza wyrażenie „wszystkie informacje” w kontekście tej zasady? (ponieważ wszystkie informacje w próbie są zawarte w funkcji prawdopodobieństwa).
- Czy zasada jest w jakiś sposób związana z bardzo możliwym do udowodnienia faktem, że ? Czy „prawdopodobieństwo” w zasadzie jest takie samo, jak p ( y | x ) , czy nie?
- Jak twierdzenie matematyczne może być „kontrowersyjne”? Moje (słabe) rozumienie matematyki polega na tym, że twierdzenie zostało udowodnione lub nie zostało udowodnione. Do jakiej kategorii należy zasada prawdopodobieństwa?
- Jak ważna jest zasada prawdopodobieństwa dla wnioskowania bayesowskiego, która opiera się na formule ?
bayesian
likelihood
likelihood-principle
Karel Bílek
źródło
źródło
Odpowiedzi:
Zasada prawdopodobieństwa została wyrażona na wiele różnych sposobów, ze zmiennym znaczeniem i zrozumiałością. Książka AWF Edwards „Prawdopodobieństwo” jest zarówno doskonałym wprowadzeniem do wielu aspektów prawdopodobieństwa, jak i wciąż w druku. Oto jak Edwards definiuje zasadę prawdopodobieństwa:
„W ramach modelu statystycznego wszystkie informacje dostarczone przez dane dotyczące względnych zalet dwóch hipotez zawarte są w stosunku prawdopodobieństwa tych hipotez”. (Edwards 1972, 1992, s. 30)
Więc teraz do odpowiedzi.
„Wszystkie informacje w próbie”, jak cytujesz, są po prostu nieodpowiednim wyrażeniem odpowiedniej części zasady prawdopodobieństwa. Edwards mówi to znacznie lepiej: model ma znaczenie, a istotną informacją są informacje odnoszące się do względnych zalet hipotez. Warto zauważyć, że współczynnik prawdopodobieństwa ma sens tylko wtedy, gdy dane hipotezy pochodzą z tego samego modelu statystycznego i wzajemnie się wykluczają. W efekcie muszą być punktami na tej samej funkcji prawdopodobieństwa, aby stosunek był użyteczny.
Jak widać, zasada prawdopodobieństwa jest związana z twierdzeniem Bayesa, ale można ją udowodnić bez odniesienia do twierdzenia Bayesa. Tak, p (x | y) jest (proporcjonalne do) prawdopodobieństwem, o ile x to dane, a y to hipoteza (która może być jedynie hipotetyczną wartością parametru).
Zasada prawdopodobieństwa budzi kontrowersje, ponieważ jej dowód został zakwestionowany. Moim zdaniem dysproporcje są wadliwe, ale mimo to budzą kontrowersje. (Na innym poziomie można powiedzieć, że zasada prawdopodobieństwa jest kontrowersyjna, ponieważ sugeruje, że częste metody wnioskowania są w pewien sposób błędne. Niektórym się to nie podoba.) Zasada prawdopodobieństwa została udowodniona, ale jej zakres trafność może być bardziej ograniczona niż wyobrażają to jej krytycy.
Zasada prawdopodobieństwa jest ważna dla metod bayesowskich, ponieważ dane wchodzą do równania Bayesa na podstawie prawdopodobieństw. Większość metod bayesowskich jest zgodna z zasadą prawdopodobieństwa, ale nie wszystkie. Niektórzy ludzie, jak Edwards i Royall, twierdzą, że wnioskowania można dokonywać na podstawie funkcji wiarygodności bez użycia twierdzenia Bayesa, „wnioskowania o czystym prawdopodobieństwie”. To również jest kontrowersyjne. W rzeczywistości jest to prawdopodobnie bardziej kontrowersyjne niż zasada prawdopodobieństwa, ponieważ Bayesianie zgadzają się z częstymi, że metody czystego prawdopodobieństwa są nieodpowiednie. (Wróg mojego wroga ...)
źródło