Statystyki i duże zbiory danych

Pytania i odpowiedzi dla osób zainteresowanych statystyką, uczeniem maszynowym, analizą danych, eksploracją danych i wizualizacją danych

1
Alternatywny wykres lejka, bez użycia błędu standardowego (SE)
Przed przesłaniem mojej metaanalizy chcę utworzyć wykres lejka w celu przetestowania niejednorodności i stronniczości publikacji. Mam sumaryczny rozmiar efektu i rozmiary efektu z każdego badania, które przyjmują wartości od -1 do +1. Mam wielkości próbek n1, n2 dla pacjentów i kontroli z każdego badania. Ponieważ nie mogę obliczyć błędu standardowego …
4
Testowanie oprogramowania statystycznego
Jakie techniki / podejścia są przydatne w testowaniu oprogramowania statystycznego? Szczególnie interesują mnie programy wykonujące estymację parametryczną z maksymalnym prawdopodobieństwem. Porównywanie wyników z wynikami z innych programów lub opublikowanych źródeł nie zawsze jest możliwe, ponieważ przez większość czasu, gdy piszę własny program, jest tak, ponieważ obliczenia, których potrzebuję, nie są …
1
Jak skorelować dwie serie czasowe z lukami i różnymi podstawami czasowymi?
Zadałem to pytanie na StackOverflow i polecono mi zadać je tutaj. Mam dwie serie czasowe danych akcelerometru 3D, które mają różne podstawy czasu (zegary uruchamiane w różnych momentach, z bardzo niewielkim pełzaniem w czasie próbkowania), a także zawierające wiele przerw o różnych rozmiarach (z powodu opóźnień związanych z pisaniem do …
1
Korzystanie z pakietu statystyk w R do grupowania kmeansów
Mam problem ze zrozumieniem jednego lub dwóch aspektów pakietu klastra. Dokładnie podążam za przykładem z Quick-R , ale nie rozumiem jednego lub dwóch aspektów analizy. Dołączyłem kod, którego używam w tym konkretnym przykładzie. ## Libraries library(stats) library(fpc) ## Data mydata = structure(list(a = c(461.4210925, 1549.524107, 936.42856, 0, 0, 0, 0, …
10 r  clustering 
4
Od adresu e-mail po quasi-losowy numer [zamknięty]
Zamknięte. To pytanie jest nie na temat . Obecnie nie przyjmuje odpowiedzi. Chcesz poprawić to pytanie? Zaktualizuj pytanie, aby było tematem dotyczącym weryfikacji krzyżowej. Zamknięte 2 lata temu . Mój cel: Chciałbym mieć funkcję, która pobiera adres e-mail i wyświetla quasi-losową liczbę 1, 2, 3 lub 4. Mały szczegół: Przez …
1
Jak obliczyć redundancję funkcji?
Mam trzy funkcje, których używam do rozwiązania problemu klasyfikacji. Początkowo te funkcje generowały wartości logiczne, więc mogłem ocenić ich redundancję, sprawdzając, w jakim stopniu zestawy klasyfikacji dodatnich i ujemnych pokrywają się. Teraz rozszerzyłem funkcje o rzeczywiste wartości (wyniki) i chciałbym jeszcze raz przeanalizować ich redundancję, ale zupełnie nie wiem, jak …
2
RNG, R, mclapply i klaster komputerów
Korzystam z symulacji na R i klastrze komputerów i mam następujący problem. Na każdym z X komputerów uruchamiam: fxT2 <- function(i) runif(10) nessay <- 100 c(mclapply(1:nessay, fxT2), recursive=TRUE) Jest 32 komputerów, każdy z 16 rdzeniami. Jednak około 2% liczb losowych jest identycznych. Jakie strategie zastosowałbyś, aby tego uniknąć? Udało mi …
4
Zasób dotyczący koncepcji leżących u podstaw statystyk, a nie technik stosowanych w statystykach stosowanych
Jaka książka jest najdokładniejszym traktowaniem podstawowych pojęć w statystyce? Nie proszę o książkę o szczegółach metod obliczeń i procedur, interesuje mnie przede wszystkim książka, która dokładnie wyjaśnia podstawowe pojęcia ... intuicyjne / ilustrowane / wizualne podejście do podstawowych pomysłów ... zamiast ładowania równań matematycznych itp. Rozmiar książki nie stanowi problemu …
10 references 
1
Udokumentowane / odtwarzalne przykłady udanych zastosowań metod ekonometrycznych w świecie rzeczywistym?
To pytanie może zabrzmieć bardzo szeroko, ale oto czego szukam. Wiem, że istnieje wiele doskonałych książek o metodach ekonometrycznych oraz wiele doskonałych artykułów z ekspozytorów na temat technik ekonometrycznych. Istnieją nawet doskonałe powtarzalne przykłady ekonometrii, jak opisano w tym sprawdzonym pytaniu krzyżowym . W rzeczywistości przykłady w tym pytaniu są …
2
Cenzura / Obcięcie w JAGS
Mam pytanie, jak dopasować problem cenzury do JAGS. Obserwuję normalną dwuwymiarową mieszaninę, w której wartości X mają błąd pomiaru. Chciałbym zamodelować prawdziwe podstawowe „średnie” zaobserwowanych wartości cenzurowanych. ⌈ xt r u e+ ϵ ⌉ = xo b s e r v e d ε ~ N( 0 , s d= …
3
Jak oszacować parametry dla obciętej dystrybucji Zipf na podstawie próbki danych?
Mam problem z parametrem oszacowania dla Zipf. Moja sytuacja jest następująca: Mam zestaw próbek (mierzony na podstawie eksperymentu, który generuje połączenia, które powinny być zgodne z rozkładem Zipf). Muszę wykazać, że ten generator naprawdę generuje połączenia z dystrybucją zipf. Przeczytałem już to pytanie. Jak obliczyć współczynnik prawa Zipfa z zestawu …
4
Budowanie interfejsów MATLAB i R do C5.0 Rossa Quinlana
Jestem rozważa budowę interfejsów MATLAB i R do Ross Quinlan „s C5.0 (dla tych, którzy nie są zaznajomieni z nim, C5.0 to pakiet algorytm drzewo decyzyjne i oprogramowanie; przedłużeniem C4.5 ) i usiłuję poznaj elementy, które musiałbym napisać. Jedyną dokumentacją, którą znalazłem dla C5.0 jest tutaj , która jest tutorialem …
2
Różnica między implementacją regresji grzbietu w R i SAS
Czytałem opis regresji grzbietu w Applied Linear Statistics Models , 5th Ed, rozdział 11. Regresję grzbietu wykonuje się na podstawie danych tkanki tłuszczowej dostępnych tutaj . Podręcznik pasuje do danych wyjściowych w SAS, gdzie współczynniki przekształcone wstecz są podane w dopasowanym modelu jako: Y= - 7,3978 + 0,5553 X1+ 0,3668 …
1
Rysowanie linii regresji częściowej
Czy istnieje sposób wykreślenia linii regresji takiego fragmentowego modelu, inny niż użycie linesdo wykreślenia każdego segmentu osobno lub użycie geom_smooth(aes(group=Ind), method="lm", fill=FALSE)? m.sqft <- mean(sqft) model <- lm(price~sqft+I((sqft-m.sqft)*Ind)) # sqft, price: continuous variables, Ind: if sqft>mean(sqft) then 1 else 0 plot(sqft,price) abline(reg = model) Warning message: In abline(reg = model) …
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.