Statystyki i duże zbiory danych

2

Czy powszechną praktyką jest minimalizowanie średniej straty w partiach zamiast sumy?

Tensorflow ma przykładowy samouczek na temat klasyfikowania CIFAR-10 . W samouczku średnia utrata entropii krzyżowej w partii jest zminimalizowana. def loss(logits, labels): """Add L2Loss to all the trainable variables. Add summary for for "Loss" and "Loss/avg". Args: logits: Logits from inference(). labels: Labels from distorted_inputs or inputs(). 1-D tensor of …

17 neural-networks loss-functions tensorflow

4

Interpretacja ujemnego podobieństwa cosinus

Moje pytanie może być głupie. Więc z góry przepraszam. Próbowałem użyć modelu GLOVE wstępnie przeszkolonego przez grupę NLP Stanforda ( link ). Zauważyłem jednak, że moje wyniki podobieństwa wykazały pewne liczby ujemne. To natychmiast skłoniło mnie do spojrzenia na plik danych słowo-wektor. Najwyraźniej wartości w wektorach słów mogły być ujemne. …

17 machine-learning word2vec cosine-similarity

4

Czy można podawać obrazy o zmiennej wielkości jako dane wejściowe do splotowej sieci neuronowej?

Czy możemy podać obrazy o zmiennej wielkości jako dane wejściowe do splotowej sieci neuronowej w celu wykrywania obiektów? Jeśli to możliwe, jak możemy to zrobić? Ale jeśli spróbujemy przyciąć obraz, stracimy część obrazu i jeśli spróbujemy zmienić jego rozmiar, wówczas jasność obrazu zostanie utracona. Czy to oznacza, że korzystanie z …

17 deep-learning tensorflow keras computer-vision object-detection

2

Dlaczego Dystrybucja Cauchy'ego jest tak przydatna?

Czy ktoś mógłby podać mi kilka praktycznych przykładów Dystrybucji Cauchy'ego? Co sprawia, że jest tak popularny?

16 distributions continuous-data cauchy

4

Dlaczego niezależność oznacza zerową korelację?

Przede wszystkim nie pytam o to: Dlaczego zerowa korelacja nie oznacza niezależności? Jest to rozwiązane (raczej ładnie) tutaj: /math/444408/why-does-zero-correlation-not-imply-independence Pytam o coś przeciwnego ... powiedzmy, że dwie zmienne są całkowicie niezależne od siebie. Czy nie mogliby przez przypadek mieć odrobinę korelacji? Czy nie powinno być ... niezależność oznacza BARDZO MAŁĄ …

16 correlation mathematical-statistics covariance independence

4

O George Box, Galit Shmueli i metodzie naukowej?

(To pytanie może wydawać się bardziej odpowiednie dla filozofii SE. Mam nadzieję, że statystycy mogą wyjaśnić moje nieporozumienia na temat wypowiedzi Boxa i Shmueli, dlatego zamieszczam je tutaj). George Box (o sławie ARIMA) powiedział: „Wszystkie modele są błędne, ale niektóre są przydatne”. Galit Shmueli w swoim słynnym artykule „Wyjaśnić lub …

16 predictive-models aic bic philosophical explanatory-models

3

Jak definiuje się związek przyczynowy?

Jaka jest matematyczna definicja związku przyczynowego między dwiema zmiennymi losowymi? Biorąc pod uwagę próbkę ze wspólnego rozkładu dwóch zmiennych losowych XXX i YYY , kiedy powiedzielibyśmy, że XXX powoduje YYY ? Dla kontekstu czytam ten artykuł o odkryciu przyczynowym .

16 machine-learning causality

1

Czy nauka nadzorowana jest podzbiorem nauki wzmacniającej?

Wydaje się, że definicja nadzorowanego uczenia jest podzbiorem uczenia wzmacniającego, ze szczególnym rodzajem funkcji nagrody opartej na danych oznaczonych (w przeciwieństwie do innych informacji w środowisku). Czy to dokładne przedstawienie?

16 machine-learning terminology reinforcement-learning supervised-learning definition

3

Czy istnieje więcej niż jedna formuła „mediana”?

W mojej pracy, gdy osoby odnoszą się do „średniej” wartości zbioru danych, zwykle odnoszą się do średniej arytmetycznej (tj. „Średniej” lub „wartości oczekiwanej”). Gdybym podał średnią geometryczną , ludzie prawdopodobnie pomyśleliby, że jestem złośliwy lub nieprzydatny, ponieważ definicja „środka” jest znana z góry. Próbuję ustalić, czy istnieje wiele definicji „mediany” …

16 median definition

1

Co to znaczy, że AUC jest częściowo poprawną zasadą punktacji?

Właściwa reguła punktacji jest regułą, która jest maksymalizowana przez „prawdziwy” model i nie pozwala na „zabezpieczanie” lub granie w system (celowe zgłaszanie różnych wyników, jak to jest prawdziwe przekonanie modelu o poprawie wyniku). Wynik Briera jest prawidłowy, dokładność (proporcja sklasyfikowana poprawnie) jest niewłaściwa i często zniechęcana. Czasami widzę, że AUC …

16 classification references roc measurement-error scoring-rules

2

Jakie formy dystrybucji dają „oczekiwanie Pitagorasa”?

Niech i będą niezależnymi ciągłymi zmiennymi losowymi wygenerowanymi z tej samej nieokreślonej postaci dystrybucyjnej, ale z uwzględnieniem różnych wartości parametrów. Interesuje mnie znalezienie formularza rozkładu parametrycznego, dla którego obowiązuje następujące prawdopodobieństwo próbkowania dla wszystkich dopuszczalnych wartości parametrów:X∼Dist(θX)X∼Dist(θX)X \sim \text{Dist}(\theta_X)Y∼Dist(θY)Y∼Dist(θY)Y \sim \text{Dist}(\theta_Y) P(X>Y|θX,θY)=θ2Xθ2X+θ2Y.P(X>Y|θX,θY)=θX2θX2+θY2.\mathbb{P}(X > Y| \theta_X, \theta_Y) = \frac{\theta_X^2}{\theta_X^2 + \theta_Y^2}. …

16 probability distributions

4

Jak statystyki bayesowskie radzą sobie z brakiem priorytetów?

To pytanie zostało zainspirowane dwiema niedawnymi interakcjami, które miałem, jedną tutaj w CV , drugą w ekonomics.se. Tam miałem wysłana odpowiedź do znanego „Koperta Paradox” (Pamiętaj, a nie jak w „poprawnej odpowiedzi”, ale jako odpowiedź płynącą z określonych założeń o strukturze sytuacji). Po pewnym czasie użytkownik opublikował krytyczny komentarz, a …

16 bayesian mathematical-statistics prior theory philosophical

4

Czy to możliwe, że wszystkie 3 wektory mają ujemne korelacje par?

Biorąc pod uwagę trzy wektory , i , jest możliwe, że korelacja pomiędzy i , i i i są negatywne? Czy to możliwe?b c a b a c b caaabbbcccaaabbbaaacccbbbccc corr ( a , b ) < 0corr(a,c)<0corr(b,c)<0corr(a,b)<0corr(a,c)<0corr(b,c)<0\begin{align} \text{corr}(a,b) < 0\\ \text{corr}(a,c) < 0 \\ \text{corr}(b,c) < 0\\ \end{align}

16 correlation correlation-matrix

6

Jak mogłem odkryć rozkład normalny?

Jakie było pierwsze wyprowadzenie rozkładu normalnego, czy możesz odtworzyć to wyprowadzenie, a także wyjaśnić je w kontekście historycznym ? Chodzi mi o to, że gdyby ludzkość zapomniała o normalnym rozkładzie, jaki jest najbardziej prawdopodobny sposób, aby go odkryć na nowo i jakie byłoby najbardziej prawdopodobne pochodzenie? Sądzę, że pierwsze pochodne …

16 probability distributions normal-distribution references history

2

Co się tutaj dzieje, kiedy używam kwadratowej straty w ustawieniach regresji logistycznej?

Próbuję użyć straty kwadratowej, aby dokonać klasyfikacji binarnej na zestawie danych zabawki. Korzystam z mtcarszestawu danych, wykorzystuję milę na galon i wagę, aby przewidzieć rodzaj transmisji. Poniższy wykres pokazuje dwa typy danych typu transmisji w różnych kolorach oraz granicę decyzji wygenerowaną przez inną funkcję strat. Kwadratowa strata wynosi ∑i(yi−pi)2∑ja(yja-pja)2)\sum_i (y_i-p_i)^2 …

16 r machine-learning logistic optimization loss-functions