Statystyki i duże zbiory danych

Pytania i odpowiedzi dla osób zainteresowanych statystyką, uczeniem maszynowym, analizą danych, eksploracją danych i wizualizacją danych

1
Krzywe ROC dla niezrównoważonych zestawów danych
Rozważ macierz wejściową i wyjście binarne .XXXyyy Częstym sposobem pomiaru wydajności klasyfikatora jest użycie krzywych ROC. Na wykresie ROC przekątna jest wynikiem, który można uzyskać z losowego klasyfikatora. W przypadku niezrównoważonego wyjścia wydajność losowego klasyfikatora można poprawić, wybierając lub z różnymi prawdopodobieństwami.yyy000111 Jak wydajność takiego klasyfikatora można przedstawić na wykresie …
1
Jak znaleźć wartość p regresji gładkiego splajnu / lessa?
Mam kilka zmiennych i jestem zainteresowany znalezieniem między nimi nieliniowych zależności. Postanowiłem więc dopasować trochę splajnu lub lessa i wydrukować ładne wykresy (patrz kod poniżej). Ale chcę też mieć statystyki, które dają mi pojęcie, jak duże jest prawdopodobieństwo, że związek jest kwestią losowości ... tj. Potrzebuję pewnej ogólnej wartości p, …
10 r  regression  splines  loess 
1
Jak określić liczbę operatorów splotowych w CNN?
W zadaniach widzenia komputerowego, takich jak klasyfikacja obiektów, z sieciami neuronowymi o konwergencji (CNN) sieć zapewnia atrakcyjną wydajność. Ale nie jestem pewien, jak ustawić parametry w warstwach splotowych. Na przykład obraz w skali szarości ( 480x480), pierwsza warstwa splotowa może wykorzystywać operator splotowy podobny 11x11x10, gdzie liczba 10 oznacza liczbę …
3
Definiowanie zależności ogona
Próbowałem znaleźć prostą, zwięzłą definicję zależności ogona. Czy ktokolwiek mógłby podzielić się tym, w co wierzy. Po drugie, gdybym wykreślił symulacje przy użyciu różnych kopuł na wykresie, skąd mam wiedzieć, które wykazują zależność od ogona.
10 fat-tails 
2
Jak uzyskać tabelę ANOVA z niezawodnymi standardowymi błędami?
Korzystam z regresji puli OLS przy użyciu pakietu plm w R. Chociaż moje pytanie dotyczy bardziej podstawowych statystyk, więc najpierw postaram się je tutaj zamieścić;) Ponieważ moje wyniki regresji dają reszty heteroskedastyczne, chciałbym spróbować użyć solidnych standardowych błędów heteroskedastycznych. W rezultacie coeftest(mod, vcov.=vcovHC(mod, type="HC0"))otrzymuję tabelę zawierającą oszacowania, błędy standardowe, wartości …
3
Jakie są kryteria i podejmowane decyzje dotyczące nieliniowości w modelach statystycznych?
Mam nadzieję, że poniższe ogólne pytanie ma sens. Należy pamiętać, że do celów tego konkretnego pytania nie interesują mnie teoretyczne (domena przedmiotowa) powody wprowadzenia nieliniowości. Dlatego sformułuję pełne pytanie w następujący sposób: Jakie są logiczne ramy ( kryteria i, jeśli to możliwe, proces decyzyjny ) dla wprowadzenia nieliniowości do modeli …
2
Jak wizualizować wartości procentowe w porównaniu z liczbą wpisów.
Staram się znaleźć najlepszy sposób na wizualizację poniższej tabeli i podkreślenie skuteczności leczenia w odniesieniu do liczby pacjentów, którzy próbowali leczenia. Oto link do faktycznej strony: http://curetogether.com/cluster-headaches/treatments/ Jaki jest najlepszy sposób na podkreślenie skuteczności przy jednoczesnym ułatwieniu porównania leczenia i sprawdzenia, ilu pacjentów oceniało każdego z nich? Myślałem o tym, …
1
Przewidywanie losowych efektów w mgcv gam
Interesuje mnie modelowanie całkowitego połowu ryb za pomocą gam w mgcv do modelowania prostych efektów losowych dla poszczególnych statków (które odbywają wielokrotne podróże w czasie na łowisku). Mam 98 przedmiotów, więc pomyślałem, że użyję gam zamiast gamma do modelowania efektów losowych. Mój model to: modelGOM <- gam(TotalFish ~ factor(SetYear) + …
3
Czy sezonowe szeregi czasowe oznaczają stacjonarne lub niestacjonarne szeregi czasowe
Jeśli mam szereg czasowy o sezonowości, czy to automatycznie powoduje, że szereg nie jest stacjonarny? Moja intuicja (prawdopodobnie wyłączona) jest taka, że ​​tak nie jest. Sezonowość oznacza, że ​​seria rośnie i spada wokół stałej wartości ... coś w rodzaju fali sinusoidalnej. Zgodnie z tą logiką szereg czasowy z sezonowością jest …
3
glm w R - która wartość reprezentuje dobroć dopasowania całego modelu?
Używam glms w R (uogólnione modele liniowe). Myślałem, że znam wartości - dopóki nie zobaczyłem, że wywołanie podsumowania dla glm nie daje nadrzędnej wartości reprezentatywnej dla modelu jako całości - przynajmniej nie w miejscu, w którym robią to modele liniowe. Zastanawiam się, czy podano to jako wartość dla przechwytywania u …
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.