Statystyki i duże zbiory danych

4

Mam macierz korelacji, która określa, w jaki sposób każdy element jest skorelowany z drugim elementem. Dlatego dla N elementów mam już macierz korelacji N * N. Korzystając z tej macierzy korelacji, w jaki sposób grupuję N elementów w pojemnikach M, aby móc powiedzieć, że elementy Nk w k-tym bin zachowują …

20 clustering python k-means

3

Dlaczego w twierdzeniu Bayesa wymagany jest czynnik normalizujący?

Twierdzenie Bayesa idzie P.( model | dane ) = P( model ) × P( dane | model )P.( dane )P.(Model|dane)=P.(Model)×P.(dane|Model)P.(dane) P(\textrm{model}|\textrm{data}) = \frac{P(\textrm{model}) \times P(\textrm{data}|\textrm{model})}{P(\textrm{data})} Wszystko w porządku. Ale gdzieś przeczytałem: Zasadniczo P (dane) jest tylko stałą normalizującą, tj. Stałą, która powoduje zintegrowanie gęstości tylnej z jedną. Wiemy, że i …

20 probability bayesian conditional-probability bayes

4

„Całkowity obszar pod funkcją gęstości prawdopodobieństwa wynosi 1” - w stosunku do czego?

Koncepcyjnie rozumiem znaczenie wyrażenia „całkowity obszar pod plikiem PDF wynosi 1”. Powinno to oznaczać, że prawdopodobieństwo, że wynik znajdzie się w całkowitym przedziale możliwości, wynosi 100%. Ale tak naprawdę nie mogę tego zrozumieć z „geometrycznego” punktu widzenia. Jeśli na przykład w pliku PDF oś x reprezentuje długość, to czy całkowity …

20 probability pdf integral

2

Wybieranie między testem i testem

Tło: Przedstawiam kolegom w pracy prezentację na temat testowania hipotez i rozumiem większość z nich dobrze, ale jest jeden aspekt, który wiążę się w węzły, próbując zrozumieć i wyjaśnić innym. Tak myślę, że wiem (proszę poprawić, jeśli źle!) Statystyki, które byłyby normalne, gdyby wariancja była znana, postępuj zgodnie z rozkładem …

20 hypothesis-testing normal-distribution t-test assumptions z-test

2

Określanie modelu różnic w różnicach z wieloma przedziałami czasowymi

Gdy oszacuję model różnic w dwóch przedziałach czasowych, model regresji równoważnej byłby następujący za. Yist=α+γs∗Treatment+λdt+δ∗(Treatment∗dt)+ϵistYist=α+γs∗Treatment+λdt+δ∗(Treatment∗dt)+ϵistY_{ist} = \alpha +\gamma_s*Treatment + \lambda d_t + \delta*(Treatment*d_t)+ \epsilon_{ist} gdzie jest manekinem równym 1, jeśli obserwacja pochodzi z grupy poddanej leczeniuTreatmentTreatmentTreatment i jest obojętne, które jest równe 1, w okresie czasu po leczeniu doszłoddd Zatem …

20 regression modeling econometrics panel-data difference-in-difference

2

Czy funkcja Caret Train dla Glmnet sprawdza krzyżowo zarówno dla alfa, jak i lambda?

Czy caretpakiet R sprawdza poprawność krzyżową dla obu modeli alphai lambdadla glmnetmodelu? Uruchamianie tego kodu eGrid <- expand.grid(.alpha = (1:10) * 0.1, .lambda = (1:10) * 0.1) Control <- trainControl(method = "repeatedcv",repeats = 3,verboseIter =TRUE) netFit <- train(x =train_features, y = y_train, method = "glmnet", tuneGrid = eGrid, trControl = …

20 r machine-learning cross-validation caret glmnet

4

Generowanie zmiennych losowych z mieszaniny rozkładów normalnych

Jak mogę próbkować z rozkładu mieszaniny, a w szczególności mieszaniny rozkładów normalnych w R? Na przykład, jeśli chcę próbkować z: 0.3×N(0,1)+0.5×N(10,1)+0.2×N(3,.1)0.3×N(0,1)+0.5×N(10,1)+0.2×N(3,.1) 0.3\!\times\mathcal{N}(0,1)\; + \;0.5\!\times\mathcal{N}(10,1)\; + \;0.2\!\times\mathcal{N}(3,.1) jak mogłem to zrobić?

20 r random-generation mixture

3

Łagodniejsze podejście do statystyki bayesowskiej

Niedawno zacząłem czytać „Wprowadzenie do statystyki bayesowskiej” 2. wydanie Bolstad. Miałem klasę statystyk wprowadzających, która obejmowała głównie testy statystyczne i prawie przechodzę klasę w analizie regresji. Jakich innych książek mogę użyć, aby uzupełnić moje zrozumienie tej? Udało mi się przejść przez pierwsze 100-125 stron. Potem książka zaczyna mówić o testowaniu …

20 hypothesis-testing bayesian

2

Dlaczego propagacja wsteczna nie działa po zainicjowaniu wag o tej samej wartości?

Dlaczego propagacja wsteczna nie działa, gdy inicjujesz całą wagę o tej samej wartości (powiedzmy 0,5), ale działa dobrze, gdy otrzymujesz liczby losowe? Czy algorytm nie powinien obliczyć błędu i działać stamtąd, mimo że początkowo wagi są takie same?

20 machine-learning neural-networks backpropagation

2

Co się stanie, gdy w regresji uwzględnię zmienną kwadratową?

Zaczynam od mojej regresji OLS: gdzie D jest zmienną fikcyjną, szacunki różnią się od zera niską wartością p. Następnie wykonuję test RESETU Ramseya i stwierdzam, że mam trochę błędnej specyfikacji równania, a zatem uwzględniam kwadrat x: y = β 0 + β 1 x 1 + β 2 x 2 …

20 regression multiple-regression interpretation least-squares polynomial

3

Jak interpretować termin przechwytywania w GLM?

Używam R i analizowałem moje dane za pomocą GLM z łączem dwumianowym. Chcę wiedzieć, jakie jest znaczenie przecięcia w tabeli wyjściowej. Punkt przecięcia dla jednego z moich modeli jest znacząco inny, jednak zmienna tak nie jest. Co to znaczy? Co to jest przechwycenie. Nie wiem, czy po prostu się mylę, …

20 r generalized-linear-model

2

Dlaczego rozkłady prawdopodobieństwa są oznaczone tyldą?

Jakie jest znaczenie tyldy przy określaniu rozkładów prawdopodobieństwa? Na przykład: Z∼ Normalny ( 0 , 1 ) .Z∼Normalna(0,1).Z \sim \mbox{Normal}(0,1).

20 probability distributions notation

5

Po co zawracać sobie głowę przybliżeniami niskiej rangi?

Jeśli masz macierz z n rzędami im kolumnami, możesz użyć SVD lub innych metod, aby obliczyć przybliżenie niskiej macierzy dla podanej macierzy. Jednak przybliżenie niskiego rzędu nadal będzie miało n wierszy i m kolumn. W jaki sposób przybliżenia niskiego poziomu mogą być przydatne w uczeniu maszynowym i przetwarzaniu języka naturalnego, …

20 r matrix approximation

4

Statystyczna intuicja / wyczucie danych

Jestem studentem drugiego roku, studiuję matematykę, i rozmawiałem z jednym z moich profesorów o różnicy między zdolnościami matematycznymi a zdolnościami statystycznymi. Jedną z kluczowych różnic, które poruszał, był „wyczucie danych”, które wyjaśnił jako połączenie zdolności technicznych podczas działania w ramach tego, co nieformalnie nazywam „ograniczeniami rozsądku”, tj. Nie tracąc z …

20 references philosophical

5

Czy istnieje funkcja R, która będzie obliczać macierz różnicy cosinus? [Zamknięte]

Zamknięte. To pytanie jest nie na temat . Obecnie nie przyjmuje odpowiedzi. Chcesz poprawić to pytanie? Zaktualizuj pytanie, aby było tematem dotyczącym weryfikacji krzyżowej. Zamknięte w zeszłym roku . Chciałbym zrobić mapę cieplną z grupowaniem wierszy na podstawie odległości cosinusowych. Używam R i heatmap.2()do robienia figury. Widzę, że zawiera distparametr, …

20 r clustering similarities