Statystyki i duże zbiory danych

Pytania i odpowiedzi dla osób zainteresowanych statystyką, uczeniem maszynowym, analizą danych, eksploracją danych i wizualizacją danych

2
zrozumienie wartości pw wielokrotnej regresji liniowej
Jeśli chodzi o wartość p analizy wielokrotnej regresji liniowej, wprowadzenie ze strony internetowej Minitab pokazano poniżej. Wartość p dla każdego terminu testuje hipotezę zerową, że współczynnik jest równy zero (brak efektu). Niska wartość p (<0,05) oznacza, że ​​możesz odrzucić hipotezę zerową. Innymi słowy, predyktor o niskiej wartości p prawdopodobnie będzie …
2
Rozkład prawdopodobieństwa dla hałaśliwej fali sinusoidalnej
Chcę analitycznie obliczyć rozkład prawdopodobieństwa punktów próbkowania z funkcji oscylacyjnej, gdy wystąpi jakiś błąd pomiaru. Obliczyłem już rozkład prawdopodobieństwa dla części „bez szumu” (umieszczę to na końcu), ale nie mogę wymyślić, jak uwzględnić „szum”. Szacunek liczbowy Aby być bardziej zrozumiałym, wyobraź sobie, że istnieje funkcja której losowo wybierasz punkty podczas …
2
Jak porównać dwa algorytmy rankingu?
Chcę porównać dwa algorytmy rankingu. W tych algorytmach klient określa pewne warunki w swoim wyszukiwaniu. Zgodnie z wymaganiami klienta, algorytm ten powinien przypisać ocenę każdemu elementowi w bazie danych i pobrać elementy o najwyższym wyniku. Na tej stronie przeczytałem różne tematy związane z moim pytaniem i przeszukałem sieć. Według moich …
5
Normy Ridge i LASSO
Ten post jest następujący: dlaczego oszacowanie grzbietu staje się lepsze niż OLS poprzez dodanie stałej do przekątnej? Oto moje pytanie: O ile mi wiadomo, w regularyzacji grzbietu stosuje się -norm (odległość euklidesowa). Ale dlaczego używamy kwadratu tej normy? (bezpośrednie zastosowanie dałoby pierwiastek kwadratowy z sumy beta kwadratu).ℓ2ℓ2\ell_2ℓ2ℓ2\ell_2 Dla porównania, nie …
2
Nieparametryczna miara siły powiązania między porządkową i ciągłą zmienną losową
Rzucam tutaj problem tak, jak go otrzymałem. Mam dwie zmienne losowe. Jeden z nich jest ciągły (Y), a drugi dyskretny i zostanie przyjęty jako porządkowy (X). Umieściłem poniżej wątku, który otrzymałem wraz z zapytaniem. Osoba, która przesłała mi dane, chce zmierzyć siłę powiązania między X i Y. Poszukuję pomysłów, które …
1
Jakie są warunki prawidłowości testu ilorazu wiarygodności
Czy ktoś mógłby mi powiedzieć, jakie są warunki prawidłowości dla asymptotycznego rozkładu testu ilorazu wiarygodności? Gdziekolwiek spojrzę, jest napisane „W warunkach prawidłowości” lub „Zgodnie z probabilistycznymi prawidłowościami”. Jakie są dokładnie warunki? Czy istnieją pierwsze i drugie pochodne prawdopodobieństwa logarytmicznego, a matryca informacji nie jest równa zero? A może coś zupełnie …
2
Czy można oceniać GLM w Python / scikit-learn przy użyciu rozkładów Poissona, Gammy lub Tweedie jako rodziny dla rozkładu błędów?
Próbuję nauczyć się języka Python i Sklearn, ale do mojej pracy muszę uruchomić regresje, które wykorzystują rozkłady błędów z rodzin Poissona, Gammy, a zwłaszcza Tweediego. Nie widzę nic w dokumentacji na ich temat, ale są one w kilku częściach dystrybucji R, więc zastanawiałem się, czy ktoś widział gdzieś implementacje dla …
1
Co powoduje wzór w kształcie litery U w korelogramie przestrzennym?
Zauważyłem we własnej pracy ten wzór podczas badania korelogramu przestrzennego w różnych odległościach, w którym pojawia się wzór w kształcie litery U w korelacjach. Mówiąc dokładniej, silne dodatnie korelacje w małych przedziałach odległości zmniejszają się wraz z odległością, a następnie osiągają dół w określonym punkcie, a następnie wspinają się z …
1
Jak utworzyć krzywą Precision-Recall, gdy mam tylko jedną wartość PR?
Mam zadanie eksploracji danych, w którym tworzę system wyszukiwania obrazów oparty na treści. Mam 20 zdjęć 5 zwierząt. Łącznie więc 100 zdjęć. Mój system zwraca 10 najbardziej odpowiednich obrazów do obrazu wejściowego. Teraz muszę ocenić wydajność mojego systemu za pomocą krzywej Precision-Recall. Nie rozumiem jednak koncepcji krzywej Precyzja-Przywołanie. Powiedzmy, że …
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.