Pytania otagowane jako data-management

14
Jakie oprogramowanie i przepływ pracy jest zalecane do publikowania danych naukowych i wykresów?
Które oprogramowanie zapewnia dobry przepływ pracy - od zwykłego wydruku kilku punktów danych po tworzenie grafiki na poziomie publikacji ze szczegółowymi stylami, składem matematycznym i „profesjonalną jakością”? Jest to trochę związane z pytaniem Davida ( jakie atrybuty czynią figurę profesjonalną jakością? ), Ale nie skupia się na atrybutach, ale na …

4
Jak radzić sobie ze zbyt dużą ilością danych?
Nasze symulacje dynamiki plazmy często generują zbyt wiele informacji. Podczas symulacji rejestrujemy różne właściwości fizyczne na siatce (x, y, z, t), która jest tak duża jak (8192x1024x1024x1500), dla co najmniej 10 właściwości. Informacje te są przetwarzane po zakończeniu symulacji. Dzięki temu my robić filmy o nieruchomościach, wykonać analizę Fouriera, obliczyć …

3
Najlepsza praktyka przechowywania hierarchicznych danych symulacyjnych
TL, DR Jaka jest sprawdzona najlepsza praktyka w naukowych kręgach obliczeniowych do przechowywania dużych ilości danych o strukturze hierarchicznej? Na przykład SQL nie działa dobrze z dużymi rzadkimi macierzami. Czy istnieje dobre narzędzie do strukturyzacji, magazynowania i analizy tego rodzaju danych? Czego używają faceci z LHC? Użyj szczegółów sprawy Chcę …

3
Czy pliki HDF5 nadają się do kontroli wersji git?
Nie znam formatu pliku używanego w HDF5, ale zastanawiam się, czy pliki HDF5 nadają się do kontroli wersji za pomocą git (lub na przykład Mercurial lub Subversion)? Wydaje mi się, że mam na myśli: czy pliki HDF5 nadają się do różnicowania na podstawie linii, czy też git będzie musiał traktować …

2
Ograniczenia pand i ich alternatywy w Pythonie
Czytałem gdzieś, że Pandy po raz pierwszy opracowano dla świata finansów, a przynajmniej nie dla nauk przyrodniczych (fizyki, biologii itd.), Więc czy jest jakiś podobny pakiet do analizy danych Pythona bardziej „zorientowany na nauki przyrodnicze”? Właśnie zacząłem używać Pand i napotkałem już dwa problemy, których nie mogłem rozwiązać bez użycia …

2
sugestia do zarządzania przebiegami symulacji?
Te pytania mogą być nieco nie na temat w comp-sci. jeśli to konieczne, proszę wskazać, gdzie to pasuje. Pytanie dotyczy tego, jak skutecznie zarządzać wszystkimi przebiegami symulacji. powiedzmy, na przykład, że symulacja wymaga ustalenia 2 parametrów, które należy zdefiniować w pewnym sugerowanym zakresie wartości. Aby znaleźć lepszy wynik uzyskany przez …
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.