Programowanie neural-network

20

Jaka jest rola błędu w sieciach neuronowych?

Jestem świadomy spadku gradientu i algorytmu propagacji wstecznej. Nie rozumiem: kiedy ważne jest stosowanie uprzedzeń i jak z niego korzystać? Na przykład, kiedy mapuję ANDfunkcję, kiedy używam 2 wejść i 1 wyjścia, nie podaje ona prawidłowych wag, jednak gdy używam 3 wejść (z których 1 jest odchylenie), daje prawidłowe wagi.

805 machine-learning neural-network artificial-intelligence backpropagation

13

Epoka kontra iteracja podczas treningu sieci neuronowych

Jaka jest różnica między epoką a iteracją podczas treningu perceptronu wielowarstwowego?

413 machine-learning neural-network deep-learning artificial-intelligence terminology

6

Jakie są zalety sztucznych sieci neuronowych w porównaniu z maszynami wektorów wsparcia? [Zamknięte]

W obecnej formie to pytanie nie pasuje do naszego formatu pytań i odpowiedzi. Oczekujemy, że odpowiedzi poparte będą faktami, referencjami lub wiedzą fachową, ale to pytanie prawdopodobnie będzie wymagało debaty, argumentów, ankiet lub rozszerzonej dyskusji. Jeśli uważasz, że to pytanie można poprawić i ewentualnie ponownie otworzyć, odwiedź centrum pomocy w …

381 machine-learning neural-network classification svm

1

Ekstremalnie małe wartości lub NaN pojawiają się w uczącej sieci neuronowej

Próbuję zaimplementować architekturę sieci neuronowej w Haskell i używać jej na MNIST. Używam hmatrixpakietu do algebry liniowej. Moja struktura szkoleniowa jest zbudowana przy użyciupipes pakietu. Mój kod kompiluje się i nie ulega awarii. Ale problem polega na tym, że pewne kombinacje rozmiaru warstwy (powiedzmy, 1000), rozmiaru minibatchu i szybkości uczenia …

329 algorithm haskell neural-network backpropagation

2

Objaśnienie danych wejściowych Keras: input_shape, jednostki, batch_size, dim itp

Dla każdej warstwy Keras ( Layerklasy), może ktoś wyjaśnić jak należy rozumieć różnicę między input_shape, units, dim, itd.? Na przykład dokument mówi, że unitsokreśl wyjściowy kształt warstwy. Na zdjęciu sieci neuronowej poniżej hidden layer1ma 4 jednostki. Czy to bezpośrednio przekłada się na unitsatrybut Layerobiektu? Czy unitsw Keras jest równy kształtowi …

261 neural-network deep-learning keras keras-layer tensor

11

Jakie jest znaczenie słowa logits w TensorFlow?

W poniższej funkcji TensorFlow musimy zasilać aktywację sztucznych neuronów w końcowej warstwie. Że rozumiem Ale nie rozumiem, dlaczego nazywa się to logitami? Czy to nie jest funkcja matematyczna? loss_function = tf.nn.softmax_cross_entropy_with_logits( logits = last_layer, labels = target_output )

250 tensorflow machine-learning neural-network deep-learning cross-entropy

3

Jak interpretować „stratę” i „dokładność” dla modelu uczenia maszynowego

Kiedy trenowałem moją sieć neuronową za pomocą Theano lub Tensorflow, będą zgłaszać zmienną o nazwie „utrata” na epokę. Jak mam interpretować tę zmienną? Wyższa strata jest lepsza lub gorsza, lub co to oznacza dla ostatecznego działania (dokładności) mojej sieci neuronowej?

201 machine-learning neural-network mathematical-optimization deep-learning objective-function

7

Gdzie mogę wywołać funkcję BatchNormalization w Keras?

Jeśli chcę użyć funkcji BatchNormalization w Keras, czy muszę wywoływać ją tylko raz na początku? Przeczytałem do tego dokumentację: http://keras.io/layers/normalization/ Nie wiem, gdzie mam to nazywać. Poniżej znajduje się mój kod, który próbuje go użyć: model = Sequential() keras.layers.normalization.BatchNormalization(epsilon=1e-06, mode=0, momentum=0.9, weights=None) model.add(Dense(64, input_dim=14, init='uniform')) model.add(Activation('tanh')) model.add(Dropout(0.5)) model.add(Dense(64, init='uniform')) model.add(Activation('tanh')) …

167 python keras neural-network data-science batch-normalization

11

Dlaczego binary_crossentropy i categorical_crossentropy dają różne wyniki dla tego samego problemu?

Próbuję wytresować CNN do kategoryzowania tekstu według tematu. Kiedy używam binarnej entropii krzyżowej, uzyskuję ~ 80% dokładności, przy kategorycznej entropii krzyżowej uzyskuję ~ 50% dokładności. Nie rozumiem, dlaczego tak jest. Jest to problem wieloklasowy, czy nie oznacza to, że muszę używać kategorycznej entropii krzyżowej i że wyniki z binarną entropią …

160 machine-learning keras neural-network deep-learning conv-neural-network

9

Dlaczego warto używać softmax w przeciwieństwie do standardowej normalizacji?

W warstwie wyjściowej sieci neuronowej typowe jest użycie funkcji softmax do przybliżenia rozkładu prawdopodobieństwa: Jest to kosztowne do obliczenia z powodu wykładników. Dlaczego po prostu nie wykonać transformacji Z, aby wszystkie wyniki były dodatnie, a następnie normalizować, dzieląc wszystkie wyniki przez sumę wszystkich wyników?

159 math neural-network softmax

7

Jaka jest różnica między pociągiem, walidacją a zestawem testowym w sieciach neuronowych?

Używam tej biblioteki do implementacji agenta uczenia się. Wygenerowałem przypadki szkoleniowe, ale nie wiem na pewno, jakie są zestawy walidacyjne i testowe. Nauczyciel mówi: 70% powinno stanowić przypadki pociągów, 10% przypadków testowych, a pozostałe 20% powinny stanowić przypadki walidacyjne. edytować Mam ten kod do treningu, ale nie mam pojęcia, kiedy …

155 artificial-intelligence neural-network

9

Dlaczego musimy znormalizować dane wejściowe dla sztucznej sieci neuronowej?

Jest to zasadnicze pytanie dotyczące teorii sieci neuronowych: Dlaczego musimy znormalizować dane wejściowe dla sieci neuronowej? Rozumiem, że czasami, gdy na przykład wartości wejściowe są nienumeryczne, trzeba wykonać pewną transformację, ale kiedy mamy wejście numeryczne? Dlaczego liczby muszą znajdować się w określonym przedziale? Co się stanie, jeśli dane nie zostaną …

151 tensorflow machine-learning neural-network normalization

8

Kiedy należy używać algorytmów genetycznych, a nie sieci neuronowych? [Zamknięte]

W obecnym stanie to pytanie nie pasuje do naszego formatu pytań i odpowiedzi. Oczekujemy, że odpowiedzi będą poparte faktami, referencjami lub ekspertyzą, ale to pytanie prawdopodobnie będzie wymagało debaty, argumentów, ankiet lub rozszerzonej dyskusji. Jeśli uważasz, że to pytanie można poprawić i prawdopodobnie ponownie otworzyć, odwiedź centrum pomocy, aby uzyskać …

139 artificial-intelligence machine-learning neural-network genetic-algorithm

7

Jak wytrenować sztuczną sieć neuronową do gry w Diablo 2 za pomocą wizualnych danych wejściowych?

Obecnie próbuję zmusić ANN do grania w grę wideo i liczyłem na pomoc od wspaniałej społeczności tutaj. Zdecydowałem się na Diablo 2. Gra toczy się więc w czasie rzeczywistym iz izometrycznego punktu widzenia, a gracz kontroluje jednego awatara, na którym skupiona jest kamera. Aby było konkretnie, zadaniem twojej postaci jest …

139 machine-learning computer-vision neural-network video-processing reinforcement-learning

12

Dlaczego w sieci neuronowej z propagacją wsteczną należy stosować nieliniową funkcję aktywacji?

Czytałem kilka rzeczy na temat sieci neuronowych i rozumiem ogólną zasadę jednowarstwowej sieci neuronowej. Rozumiem potrzebę dodatkowych warstw, ale dlaczego są używane nieliniowe funkcje aktywacji? Po tym pytaniu następuje pytanie: Do czego służy pochodna funkcji aktywacji wykorzystywanej w propagacji wstecznej?

139 math machine-learning neural-network deep-learning

Pytania otagowane jako neural-network