Statystyki i duże zbiory danych

5

Jestem studentem matematyki z niewielkim doświadczeniem w matematyce stosowanej. Od ostatniej jesieni chodzę na zajęcia z książki Caselli i Bergera i ukończyłem setki (230+) stron z problemami z ćwiczeniami w książce. W tej chwili jestem w rozdziale 10. Ponieważ jednak nie studiowałem statystyki ani nie planowałem być statystykiem, nie sądzę, …

22 distributions references eda

2

Różnica między testem sumy rang Wilcoxona a testem rang podpisanych Wilcoxona

Zastanawiałem się, jaka jest teoretyczna różnica między testem sumy rang Wilcoxona a testem rang Wilcoxona przy użyciu sparowanych obserwacji. Wiem, że test sumy rang Wilcoxona pozwala na różną liczbę obserwacji w dwóch różnych próbkach, podczas gdy test rangi ze znakiem w parach nie pozwala na to, jednak wydaje mi się, …

22 paired-data wilcoxon-signed-rank wilcoxon-mann-whitney

3

Jak sprawdzić, czy moje dane pasują do rozkładu wykładniczego?

Jak mogę sprawdzić, czy moje dane, np. Wynagrodzenie, pochodzą z ciągłego wykładniczego rozkładu w R? Oto histogram mojej próbki: . Każda pomoc będzie mile widziana!

22 r distributions goodness-of-fit exponential

5

Jak prawdziwy jest ten slajd dotyczący głębokiego uczenia się, który twierdzi, że wszystkie ulepszenia z lat 80. XX wieku wynikają tylko z dużo większej ilości danych i znacznie szybszych komputerów?

Słuchałem rozmowy i zobaczyłem ten slajd: Jak to jest prawda?

22 deep-learning deep-belief-networks

3

Co oznacza „wszystko inne równe” w regresji wielokrotnej?

Kiedy wykonujemy wiele regresji i mówimy, że patrzymy na średnią zmianę zmiennej dla zmiany zmiennej , utrzymując wszystkie pozostałe zmienne na stałym poziomie, na jakich wartościach utrzymujemy inne zmienne jako stałe? Ich średni? Zero? Dowolna wartość?yyyxxx Jestem skłonny myśleć, że to ma jakąkolwiek wartość; tylko szukam wyjaśnień. Gdyby ktoś miał …

22 multiple-regression interpretation least-squares regression-coefficients controlling-for-a-variable

2

Dlaczego PCA danych za pomocą SVD danych?

To pytanie dotyczy skutecznego sposobu obliczania głównych składników. Wiele tekstów na temat liniowego PCA opowiada się za dekompozycją danych w liczbie pojedynczej . Oznacza to, że jeśli mamy dane i chcemy zastąpić zmienne (jego kolumny ) głównymi składnikami, wykonujemy SVD: , wartości osobliwe (pierwiastki kwadratowe wartości własnych) zajmujące główną przekątną …

22 pca algorithms svd matrix-decomposition

3

Korzyści z używania wykresów QQ nad histogramami

W tym komentarzu Nick Cox napisał: Podział na klasy jest starożytną metodą. Podczas gdy histogramy mogą być przydatne, nowoczesne oprogramowanie statystyczne ułatwia, a także wskazane jest dopasowanie rozkładów do surowych danych. Binning po prostu odrzuca szczegóły, które są kluczowe przy określaniu, które rozkłady są prawdopodobne. Kontekst tego komentarza sugeruje użycie …

22 references histogram binning qq-plot

2

Jak faktycznie działa ładowanie w R?

Patrzyłem na pakiet rozruchowy w R i chociaż znalazłem kilka dobrych starterów, jak go używać, to jeszcze nie znalazłem niczego, co dokładnie opisuje to, co dzieje się „za kulisami”. Na przykład w tym przykładzie przewodnik pokazuje, jak używać standardowych współczynników regresji jako punktu wyjścia do regresji bootstrapu, ale nie wyjaśnia, …

22 r regression bootstrap regression-coefficients

4

Metoda Z-score Stouffera: co jeśli sumujemy zamiast ?

Przeprowadzam niezależnych testów statystycznych z tą samą hipotezą zerową i chciałbym połączyć wyniki w jedną wartość . Wydaje się, że istnieją dwie „akceptowane” metody: metoda Fishera i metoda Stouffera .NNNppp Moje pytanie dotyczy metody Stouffera. Dla każdego osobnego testu otrzymuję wynik Z- ziziz_i . Zgodnie z hipotezą zerową, a każdy …

22 hypothesis-testing chi-squared p-value multiple-comparisons combining-p-values

2

Kolejne kroki po „Bayesian Reasoning and Machine Learning”

Obecnie przeglądam „Bayesian Reasoning and Machine Learning” Davida Barbera i jest to niezwykle dobrze napisana i wciągająca książka do nauki podstaw. Więc pytanie do kogoś, kto już to zrobił. Jaki zestaw książek powinienem przejrzeć po tym, jak opanuję większość pojęć z fryzjera męskiego?

22 machine-learning bayesian references graphical-model

3

Dlaczego stosuje się algorytm maksymalizacji oczekiwań?

Z tego, co niewiele wiem, algorytm EM można wykorzystać do znalezienia maksymalnego prawdopodobieństwa przy zerowaniu pochodnych cząstkowych w odniesieniu do parametrów prawdopodobieństwa daje zestaw równań, których nie można rozwiązać analitycznie. Ale czy algorytm EM jest potrzebny zamiast jakiejś techniki numerycznej, aby znaleźć maksimum prawdopodobieństwa w odniesieniu do ograniczenia zbioru wspomnianych …

22 expectation-maximization

1

Czy istnieje powód, aby preferować konkretną miarę wielokoliniowości?

Pracując z wieloma zmiennymi wejściowymi, często martwimy się wielokoliniowością . Istnieje wiele miar wielokoliniowości, które są wykorzystywane do wykrywania, myślenia i / lub komunikowania wielokoliniowości. Niektóre typowe zalecenia to: Wielokrotność dla danej zmiennej R2jRj2R^2_j Tolerancja, dla określonej zmiennej 1−R2j1−Rj21-R^2_j Współczynnik inflacji wariancji, dla konkretnej zmiennej VIF=1toleranceVIF=1tolerance\text{VIF}=\frac{1}{\text{tolerance}} Numer warunku macierzy projektowej …

22 multicollinearity

2

Ograniczone maszyny Boltzmanna a wielowarstwowe sieci neuronowe

Chciałem eksperymentować z siecią neuronową w związku z problemem klasyfikacji, przed którym stoję. Natknąłem się na dokumenty, które mówią o KMS. Ale z tego, co rozumiem, nie różnią się niczym od posiadania wielowarstwowej sieci neuronowej. Czy to jest dokładne? Ponadto pracuję z R i nie widzę żadnych puszkowanych pakietów dla …

22 r machine-learning classification neural-networks

3

Czy statystycy powinni się uczyć uczenia maszynowego?

Czy uczenie maszynowe jest ważnym tematem dla każdego statystyki, z którym należy się zapoznać? Wydaje się, że uczenie maszynowe to statystyki. Dlaczego programy statystyczne (licencjackie i magisterskie) nie wymagają uczenia maszynowego?

22 machine-learning careers

5

Co dokładnie wykonuje test nieparametryczny i co robisz z wynikami?

Mam wrażenie, że można było o to zapytać gdzie indziej, ale nie tak naprawdę z rodzajem podstawowego opisu, którego potrzebuję. Wiem, że nieparametryczny polega na medianie zamiast na średniej do porównywania ... czegoś. Wierzę również, że opiera się na „stopniach swobody” (?) Zamiast standardowego odchylenia. Popraw mnie, jeśli się mylę. …

22 hypothesis-testing nonparametric wilcoxon-mann-whitney