Statystyki i duże zbiory danych

Pytania i odpowiedzi dla osób zainteresowanych statystyką, uczeniem maszynowym, analizą danych, eksploracją danych i wizualizacją danych

6
Prędkość obliczeniowa w R?
Zadanie polegało mi na przeniesieniu jednego z naszych obecnych dużych modeli stochastycznych z SAS do nowego języka. Osobiście wolę tradycyjny skompilowany język, ale PI chce, żebym sprawdził R, którego nigdy nie używałem. Naszą motywacją do wyciągnięcia modelu z SAS jest (1) wiele osób nie ma do niego dostępu, ponieważ SAS …
16 r  computing 
2
Dlaczego macierz projekcji ortogonalnej projekcji jest symetryczna?
Jestem w tym całkiem nowy, więc mam nadzieję, że wybaczysz mi, jeśli pytanie jest naiwne. (Kontekst: Uczę się ekonometrii z książki Davidsona i MacKinnona „Teoria ekonometryczna i metody” i wydaje się, że nie wyjaśniają tego; przyjrzałem się także książce optymalizacyjnej Luenbergera, która zajmuje się projekcjami na nieco bardziej zaawansowanym poziomie, …
1
Kiedy stosować ważoną odległość euklidesową i jak określić stosowane masy?
Mam zestaw danych, w którym każde dane składa się z różnych miar. Dla każdego pomiaru mam wartość odniesienia. Chciałbym wiedzieć, jak blisko są wszystkie dane do wartości odniesienia.nnn Pomyślałem o użyciu ważonej odległości euklidesowej w następujący sposób: rex , b= ( ∑ni = 1wja( xja- bja)2)) )1 / 2rex,b=(∑ja=1nwja(xja-bja)2)))1/2)\hspace{0.5in} d_{x,b}=\left( …
1
Jak obliczyć pasma predykcyjne dla regresji nieliniowej?
Strona pomocy dla Prism zawiera następujące wyjaśnienie, w jaki sposób oblicza pasma predykcyjne dla regresji nieliniowej. Przepraszam za długi cytat, ale nie postępuję zgodnie z drugim akapitem (który wyjaśnia, jak zdefiniowano G|xG|xG|x i obliczono dY/dPdY/dPdY/dP ). Każda pomoc byłaby bardzo mile widziana. Obliczanie przedziałów ufności i predykcji jest dość standardowe. …
4
Klasyczny model liniowy - wybór modelu
Mam klasyczny model liniowy z 5 możliwymi regresorami. Nie są ze sobą skorelowane i mają dość niską korelację z odpowiedzią. Doszedłem do modelu, w którym 3 regresory mają znaczące współczynniki dla ich statystyki t (p <0,05). Dodanie jednej lub obu pozostałych 2 zmiennych daje wartości p> 0,05 dla statystyki t, …
4
Interpretacja exp (B) w wielomianowej regresji logistycznej
Jest to pytanie początkującego, ale jak interpretować wynik exp (B) 6.012 w wielomianowym modelu regresji logistycznej? 1) Czy jest to 6,012–1,0 = 5,012 = 5012% wzrostu ryzyka? lub 2) 6,012 / (1 + 6,012) = 0,857 = 85,7% wzrost ryzyka? W przypadku, gdy obie alternatywy są nieprawidłowe, czy ktoś może …
2
Analiza punktu zmiany za pomocą R's nls ()
Próbuję zaimplementować analizę „punktu zmiany” lub regresję wielofazową nls()w R. Oto kilka fałszywych danych, które stworzyłem . Formuła, której chcę użyć do dopasowania danych, to: y= β0+ β1x + β2)max ( 0 , x - δ)y=β0+β1x+β2)max(0,x-δ)y = \beta_0 + \beta_1x + \beta_2\max(0,x-\delta) Powinno to polegać na dopasowaniu danych do określonego …
1
Testowanie hipotez sekwencyjnych w naukach podstawowych
Jestem farmakologiem i z mojego doświadczenia wynika, że ​​prawie wszystkie prace z podstawowych badań biomedycznych wykorzystują test t-Studenta (albo do wnioskowania, albo do spełnienia oczekiwań ...). Kilka lat temu zwróciłem uwagę, że test t-Studenta nie jest najskuteczniejszym testem, jaki można zastosować: testy sekwencyjne oferują znacznie większą moc dla dowolnej wielkości …
3
Niezawodne wykrywanie wartości odstających w okresach finansowych
Szukam pewnych niezawodnych technik usuwania wartości odstających i błędów (bez względu na przyczynę) z danych finansowych szeregów czasowych (tj. Tickdata). Dane finansowe szeregów czasowych od tyknięcia do tyka są bardzo nieporządne. Zawiera ogromne przerwy (czasowe), gdy giełda jest zamknięta, i wykonuje ogromne skoki, gdy giełda ponownie się otwiera. Gdy giełda …
2
Wybór pomiędzy „statystykami” Freedmana i in., A „modelami statystycznymi: teoria i praktyka” Freedmana
Nie jestem statystykiem, ale bardzo interesuję się statystykami i chciałbym kupić książkę, aby zachować ją jako punkt odniesienia. Mam kilka książek na określone tematy (np . Elementy uczenia statystycznego for machine learning lub Bayesian Data Analysis for ... cóż, Bayesian Data Analysis :) Szukałem również bardziej ogólnej książki. Książki Freedmana …
16 references 
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.