Statystyki i duże zbiory danych

2

Dowody na istnienie wywołanego przez człowieka globalnego ocieplenia uderzają w „złoty standard”: jak to zrobili?

Ta wiadomość w artykule Reutera z 25.02.2019 jest obecnie w wiadomościach: Dowody na istnienie wywołanego przez człowieka globalnego ocieplenia uderzają w „złoty standard” [Naukowcy] stwierdzili, że pewność, że działalność człowieka podnosi ciepło na powierzchni Ziemi, osiągnęła poziom „pięciu sigma”, statystyczny wskaźnik oznaczający, że istnieje tylko jedna na milion szansa, że …

35 p-value intuition application communication climate

4

Jakie są różnice między rzadkim kodowaniem a autoencoderem?

Kodowanie rzadkie definiuje się jako uczenie się kompletnego zestawu wektorów podstawowych do reprezentowania wektorów wejściowych (<- dlaczego tego chcemy). Jakie są różnice między rzadkim kodowaniem a autoencoderem? Kiedy zastosujemy rzadkie kodowanie i autoencoder?

35 machine-learning neural-networks unsupervised-learning deep-learning autoencoders

11

Średnie odchylenie bezwzględne vs. odchylenie standardowe

W książce „New Comprehensive Mathematics for O Level” Greera (1983) widzę uśrednione odchylenie obliczone w następujący sposób: Zsumuj bezwzględne różnice między pojedynczymi wartościami a średnią. Więc zdobądź jego średnią. W rozdziale tym stosuje się określenie średnie odchylenie . Ale ostatnio widziałem kilka referencji, które używają terminu odchylenie standardowe i to …

35 distributions standard-deviation frequency variability

1

Regresja logistyczna: test chi-kwadrat anova vs. istotność współczynników (anova () vs podsumowanie () w R)

Mam logistyczny model GLM z 8 zmiennymi. Przeprowadziłem test chi-kwadrat w R, anova(glm.model,test='Chisq')a 2 zmienne okazały się predykcyjne, gdy zamówiono je u góry testu, i nie tak bardzo, gdy zamówiono u dołu. summary(glm.model)Sugeruje, że ich współczynniki są nieznaczne (wysoka wartość p). W tym przypadku wydaje się, że zmienne nie są …

35 r regression logistic statistical-significance generalized-linear-model

8

Losowy spacer po krawędziach sześcianu

Mrówka jest umieszczana w rogu sześcianu i nie może się poruszać. Pająk zaczyna od przeciwnego rogu i może poruszać się wzdłuż krawędzi sześcianu w dowolnym kierunku z jednakowym prawdopodobieństwem . Średnio ile kroków będzie musiał pająk dostać się do mrówki?(x,y,z)(x,y,z)(x,y,z)1/31/31/3 (To nie jest praca domowa, to pytanie do wywiadu.)

35 probability random-walk

3

Jak udowodnić, że podstawową funkcją radialną jest jądro?

Jak udowodnić, że podstawowa funkcja radialna jest jądrem? O ile rozumiem, aby to udowodnić, musimy udowodnić jedno z poniższych:k(x,y)=exp(−||x−y||2)2σ2)k(x,y)=exp⁡(−||x−y||2)2σ2)k(x, y) = \exp(-\frac{||x-y||^2)}{2\sigma^2}) Dla dowolnego zestawu wektorów macierz = jest dodatnim półfinałem.x1,x2,...,xnx1,x2,...,xnx_1, x_2, ..., x_nK(x1,x2,...,xn)K(x1,x2,...,xn)K(x_1, x_2, ..., x_n)(k(xi,xj))n×n(k(xi,xj))n×n(k(x_i, x_j))_{n \times n} Można przedstawić mapowanie takie jak = .ΦΦ\Phik ( x , …

35 svm kernel-trick

3

Sprzeczność istotności w regresji liniowej: istotny test t dla współczynnika vs nieistotna ogólna statystyka F

Dopasowuję model wielokrotnej regresji liniowej między 4 zmiennymi kategorialnymi (z 4 poziomami każda) i danymi liczbowymi. Mój zestaw danych ma 43 obserwacje. Regresja daje mi następujące wartości z testu dla każdego współczynnika nachylenia: . Tak więc współczynnik dla 4. predyktora jest istotny na poziomie ufności .pppttt.15 , .67 , .27 …

35 regression hypothesis-testing multiple-comparisons multiple-regression t-test

5

Darmowy zestaw danych do bardzo wysokiej klasyfikacji wymiarowej [zamknięty]

Jaki jest swobodnie dostępny zestaw danych do klasyfikacji z ponad 1000 cech (lub punktów próbkowania, jeśli zawiera krzywe)? Istnieje już wiki społeczności o wolnych zestawach danych: Lokalizowanie swobodnie dostępnych próbek danych Ale tutaj byłoby miło mieć bardziej szczegółową listę, z której można wygodniej korzystać , proponuję również następujące zasady: Jeden …

35 machine-learning classification dataset large-data

4

Różnica między konstrukcją podłużną a szeregami czasowymi

Jaka jest / są różnice między konstrukcją podłużną a szeregiem czasowym?

35 time-series panel-data

3

Co to jest pozostały błąd standardowy?

Podczas uruchamiania modelu regresji wielokrotnej w R jednym z wyjść jest resztkowy błąd standardowy wynoszący 0,0589 przy 95161 stopniach swobody. Wiem, że 95.161 stopni swobody wynika z różnicy między liczbą obserwacji w mojej próbce a liczbą zmiennych w moim modelu. Jaki jest pozostały błąd standardowy?

35 regression standard-error residuals

4

Ogólna suma zmiennych losowych Gamma

Mam przeczytać , że suma gamma zmiennych losowych o tym samym parametrem skali jest inna zmienna losowa Gamma. Widziałem też artykuł Moschopoulosa opisujący metodę sumowania ogólnego zestawu zmiennych losowych Gamma. Próbowałem wdrożyć metodę Moschopoulosa, ale jeszcze nie odniosłem sukcesu. Jak wygląda suma ogólnego zestawu zmiennych losowych Gamma? Aby sprecyzować to …

35 probability distributions gamma-distribution summations saddlepoint-approximation

4

Dlaczego regresja logistyczna staje się niestabilna, gdy klasy są dobrze rozdzielone?

Dlaczego regresja logistyczna staje się niestabilna, gdy klasy są dobrze rozdzielone? Co oznaczają dobrze oddzielone klasy? Byłbym bardzo wdzięczny, gdyby ktoś mógł wyjaśnić na przykładzie.

34 r regression logistic separation

5

Co jeśli moje dane regresji liniowej zawierają kilka współzależnych zależności liniowych?

Powiedzmy, że badam, jak żonkile reagują na różne warunki glebowe. Zebrałem dane na temat pH gleby w porównaniu do dojrzałej wysokości żonkila. Oczekuję relacji liniowej, więc zaczynam o regresji liniowej. Jednak nie zdawałem sobie sprawy, kiedy rozpocząłem badanie, że populacja zawiera dwie odmiany żonkila, z których każda reaguje bardzo różnie …

34 regression linear-model dataset

3

R - Mylone z terminologią resztkową

Błąd średniej kwadratowej rezydualna suma kwadratów błąd resztkowy standardowy średni błąd kwadratu błąd testu Myślałem, że kiedyś rozumiałem te terminy, ale im więcej robię problemów statystycznych, tym bardziej się mylę, gdy się domyślam. Chciałbym trochę pewności i konkretnego przykładu Potrafię łatwo znaleźć równania w Internecie, ale mam problem z uzyskaniem …

34 r regression residuals

2

Model efektów mieszanych z zagnieżdżaniem

Mam dane zebrane z eksperymentu zorganizowane w następujący sposób: Dwa miejsca, każde z 30 drzewami. 15 jest leczonych, 15 kontroluje w każdym miejscu. Z każdego drzewa pobieramy próbki trzech kawałków łodygi i trzech kawałków korzeni, a więc 6 poziomów 1 próbki na drzewo, które jest reprezentowane przez jeden z dwóch …

34 r mixed-model model nested-data lme4-nlme