Jak wybrać poziom ufności?

12

Często używam 90% poziomu ufności, akceptując, że ma to większy stopień niepewności niż 95% lub 99%.

Ale czy są jakieś wskazówki, jak wybrać odpowiedni poziom zaufania? Czy też wytyczne dotyczące poziomów ufności stosowanych w różnych dziedzinach?

Czy przy interpretacji i prezentacji poziomów ufności są jakieś wskazówki, które zamieniają liczbę na język? Na przykład, takie jak przewodniki dla r Pearsona ( edytuj: te opisy dotyczą nauk społecznych):

http://faculty.quinnipiac.edu/libarts/polsci/Statistics.html

Aktualizacja

Dzięki za odpowiedzi poniżej. Wszyscy byli BARDZO pomocni, wnikliwi i pouczający.

Ponadto poniżej znajdują się fajne artykuły na temat wyboru poziomu istotności (zasadniczo to samo pytanie), na które natknąłem się, analizując to pytanie. Potwierdzają to, co powiedziano w odpowiedziach poniżej.

„Jakie znaczenie ma znaczenie 0,05?”

http://www.p-value.info/2013/01/whats-signiance-of-005-signiance_6.html

„O początkach poziomu istotności statystycznej .05”

http://www.radford.edu/~jaspelme/611/Spring-2007/Cowles-n-Davis_Am-Psyc_orignis-of-05-level.pdf

„Metoda naukowa: błędy statystyczne”

http://www.nature.com/news/scientific-method-statistic-errors-1.14700

Oliver Moran
źródło

Odpowiedzi:

9

Oprócz świetnej odpowiedzi Tima, istnieją nawet inne powody dla pewnych przedziałów ufności. Na przykład w badaniu klinicznym lakieru do włosów chciałbyś być bardzo pewny, że twoje leczenie nikogo nie zabije, powiedzmy 99,99%, ale byłoby idealnie w porządku z 75% przedziałem ufności, że lakier do włosów pozostawia włosy prosto.

Ogólnie rzecz biorąc, przedziały ufności powinny być stosowane w taki sposób, abyś czuł się swobodnie z niepewnością, ale także nie tak surowe, aby obniżyły moc twojego badania do nieistotności. 90% przedział ufności oznacza, że ​​przy powtarzaniu próbkowania można oczekiwać, że jeden raz w dziesięciu przedziałach czasu wygenerowania nie będzie zawierał prawdziwej wartości. Czy na podstawie tego, co badasz, jest to do przyjęcia? Z drugiej strony, jeśli wolisz przedział ufności 99%, to czy Twoja próbka jest wystarczająca, aby przedział nie był bezużytecznie duży? (Mam nadzieję, że decydujesz się na poziom CI przed rozpoczęciem badania, prawda?)

Z mojego doświadczenia (w naukach społecznych) i na podstawie tego, co widziałem u żony (w naukach biologicznych), podczas gdy istnieją różne standardy CI / znaczenia w różnych dziedzinach i różnych konkretnych przypadkach, nie jest to rzadkie większość dyskusji na dany temat dotyczy tego, czy odpowiednio ustawiłeś przedział CI lub poziom istotności. Byłem na spotkaniach, na których statystyczny cierpliwie tłumaczył klientowi, że chociaż może on polubić dwustronny przedział ufności 99%, aby jego dane zawsze wykazywały znaczenie, musiałby zwiększyć próbę dziesięciokrotnie; i byłem na spotkaniach, na których klienci pytają, dlaczego żadne z ich danych nie wykazują znaczącej różnicy, gdzie cierpliwie im tłumaczymy, ponieważ wybrali wysoki interwał - lub odwrotnie, wszystko jest znaczące, ponieważ zażądano niższego interwału.

Sugeruję, aby przeczytać niektóre z najważniejszych artykułów w swojej dziedzinie (jak najbliżej określonego tematu) i zobaczyć, z czego korzystają; połącz to z poziomem komfortu i wielkością próbki; a następnie bądź przygotowany na obronę tego, co wybierzesz przy użyciu tych informacji. Chyba że jesteś na polu o bardzo surowych zasadach - podejrzewam, że badania kliniczne są jedynymi, które są tak rygorystyczne, przynajmniej z tego, co widziałem - nie dostaniesz nic lepszego. (A jeśli istnieją surowe zasady, spodziewam się, że główne dokumenty w twojej dziedzinie będą tego przestrzegać!)

Joe
źródło
5
Na rynku dostępne są tysiące lakierów do włosów. Wyobrażam sobie, że wolelibyśmy, aby żaden z nich nie zabijał ludzi. To wydaje się zbyt łagodne. ;)α
Alexis,
2
@Alexis Niestety, na każde kilka tysięcy użytkowników jeden z nich prawdopodobnie zapomni nigdy nie używał zapalniczki podczas spryskiwania włosów ...
Joe
2
„90% przedział ufności oznacza, że ​​raz na dziesięć znajdziesz wartość odstającą”. Jest to całkowicie błędne, chyba że źle cię interpretuję
Shadowtalker
2
90% CI oznacza, że ​​w 90% przypadków średnia populacji mieści się w przedziale ufności, a 10% jest poza (z jednej lub drugiej strony) przedziałem. Zatem 1 raz na 10 twoje odkrycie nie zawiera prawdziwej średniej. Być może słowo „odstające” jest niewłaściwym słowem (chociaż elementy CI są często (błędnie) używane do tego celu.)
Joe
@Joe, zdaję sobie sprawę, że to stara sekcja komentarzy, ale to źle. Możesz mieć CI na dowolnym poziomie „zaufania”, który nigdy nie obejmuje prawdziwej wartości. Zobacz tutaj: stats.stackexchange.com/a/26457/176202
Frans Rodenburg
20

Wybór przedziału przedziału ufności jest decyzją subiektywną . Można wybrać dosłownie każdy przedział ufności: 50%, 90%, 99,999% ... itd O to, ile zaufania mają Państwo chcą mieć. Prawdopodobnie najczęściej stosowane są 95% CI.

Jeśli chodzi o interpretację i link, który podałeś ... Tego rodzaju interpretacje są nadmiernymi uproszczeniami . Korelacja jest dobrym przykładem, ponieważ w różnych kontekstach różne wartości można uznać za „silną” lub „słabą” korelację, spójrz na jakiś przypadkowy przykład z sieci :

  • Kiedyś zapytałem chemika, który kalibrował przyrząd laboratoryjny do standardu, jakiej wartości współczynnika korelacji szukała. „0,9 jest za niski. Potrzebujesz co najmniej 0,98 lub 0,99 ”. Otrzymała numer z rządowego dokumentu z wytycznymi.
  • Zapytałem kiedyś inżyniera, który przeprowadzał analizę regresji procesu leczenia, jakiej wartości współczynnika korelacji szukał. „Wszystko między 0,6 a 0,8 jest dopuszczalne”. Powiedział mu o tym profesor college'u.
  • Kiedyś zapytałem biologa, który przeprowadzał ANOVA wielkości myszy polowych żyjących w glebie zanieczyszczonej w porównaniu z nieskazitelną glebą, jakiej wartości współczynnika korelacji szukał. Nie wiedział, ale jego wartość graniczna wynosiła 0,2 w oparciu o najmniejszą różnicę wielkości, którą jego model mógł wykryć na podstawie liczby próbek, jakie miał.

Przykro mi, ale nie ma skrótów ...

Aby lepiej poczuć, czym są przedziały ufności, możesz przeczytać więcej na ich temat, np. Tutaj , tutaj lub tutaj .

Tim
źródło
1
Niezły cytat. +1.
ameba mówi Przywróć Monikę
To, co mówisz o opisach korelacji, jest poprawne. Jest to całkowicie związane z polem. Opisy w linku dotyczą nauk społecznych. Podejrzewam, że opis przedziału ufności również zależy od pola.
Oliver Moran
9

Chociaż ogólnie poziomy ufności pozostawia się w gestii analityka, zdarzają się przypadki, gdy są one określone przez przepisy ustawowe i wykonawcze. Dam ci dwa przykłady.

W nadzorze bankowym należy stosować 99% poziom ufności przy obliczaniu niektórych rodzajów ryzyka, patrz str. 2 w tym rozporządzeniu bazylejskim .

FDA może polecić stosowanie pewnych poziomów ufności do testowania leków i urządzeń w swoich metodach statystycznych.

Ogólnie rzecz biorąc, dobrą praktyką jest skonsultowanie się z ekspertem w swojej dziedzinie, aby dowiedzieć się, jakie są przyjęte praktyki i przepisy dotyczące poziomów zaufania.

Aksakal
źródło