DOBRZE. niektóre czynniki do uwzględnienia
Używam Backup Exec 12.x / 13.x, Mam środowisko serwera 2003/2008, w tym Exchange.
Mam kopię zapasową na dysk (Full / Diff), która jest niezależna od kopii zapasowej na LTO (Full / Diff). Z więcej niż jednego powodu wolę nie tylko tworzyć kopie zapasowe z dysku na taśmę. Chciałbym, aby kopia zapasowa była wykonywana bezpośrednio w LTO.
Obecnie mam pojedynczy napęd LTO-3 bez żadnego rodzaju modułu ładującego / robota / biblioteki. Pudełko obsługujące napęd LTO ma w sobie kartę SCSI Adaptec 39160 Ultra160 . Obecnie używam jednej taśmy dla Full (jedna na tydzień) i jednej taśmy dla Diff (cztery dni w tygodniu przed wyjęciem taśmy). Pełna kopia zapasowa uderza w barierę 372,5 GB, a kiedy to się kończy, kopia nie kończy się w sobotę, wciąż czeka na taśmę w poniedziałek rano.
Ward wspomniał o włożeniu drugiej pełnej taśmy LTO3 w poniedziałek po południu / wieczorem po normalnych godzinach pracy. Problem z tym porównano poniżej:
Normalny przepływ
- W piątek włóż taśmę LTO3 1, aby uzyskać pełną kopię zapasową w pierwszym tygodniu
- W poniedziałek włóż taśmę LTO3 do mechanizmu różnicowego
- We wtorek, środę i czwartek dyferencjały używają taśmy włożonej w poniedziałek
- powtórz dla tygodnia 2
2 taśmy LTO3 dla pełnego przepływu kopii zapasowej
- W piątek włóż taśmę LTO3 1, aby uzyskać pełną kopię zapasową w pierwszym tygodniu
- W poniedziałek włóż taśmę LTO3 2 do pełnej kopii zapasowej na tydzień 1
- W poniedziałek włóż taśmę LTO3 1 do pełnej kopii zapasowej na tydzień 1 (do weryfikacji)
- W poniedziałek włóż taśmę LTO3 2 do pełnej kopii zapasowej na tydzień 1 (do weryfikacji)
- Wtorek włóż taśmę LTO 3 do mechanizmu różnicowego
- W środę, w czwartek dyferencjały używają taśmy włożonej we wtorek
- powtórz dla tygodnia 2
Dodatkowe wymiany taśm zjadają ponad 6 godzin w poniedziałek (od momentu włożenia drugiej taśmy). Gdybym to zrobił o 17:00, byłbym tu aż do północy, zamieniając taśmy. To nie licząc czasu bezczynności w sobotę / niedz / pn czekającego na taśmę.
Teraz mogę wyłączyć proces weryfikacji i zapisać dwie wymiany taśm i skrócić proces tworzenia kopii zapasowej o kilka godzin, ale nie mogę po prostu włożyć taśmy 2 i odejść pod koniec dnia, jeśli nie wyłączę weryfikacji . Przeniesienie kopii zapasowej na drugą taśmę wydłuża proces tworzenia kopii zapasowej, ale także
- Zwiększa liczbę taśm w rotacji (koszt)
- Zwiększa liczbę transportowanych taśm (rozmiar / waga teczki przechodzącej do magazynu poza zakładem)
- Zwiększa złożoność procesu tworzenia kopii zapasowej, zmuszając mnie do pozostania na miejscu po godzinach w celu weryfikacji
- Zwiększa złożoność zarządzania kopiami zapasowymi / przywracaniem z mojego biura, które nie znajduje się tuż obok serwerowni. To czterokrotnie w przypadku rozwiązywania takich problemów z domu.
I tak, nie idę w sobotę, aby siedzieć tam ponad 6 godzin i opiekować się napędem taśmowym. Chciałbym mieć życie poza pracą. 12-godzinne dni MF są wystarczająco złe, kiedy się zdarzają. Nie zamierzam na stałe wiązać się z 6-dniowym tygodniem pracy.
Napęd taśmowy to Dell PowerVault 110T LTO3. Serwer zapasowy działa w Gigabit Ethernet przy użyciu tylko jednej karty sieciowej i może zapełnić pełną taśmę w około 12 godzin.
Mogę zmienić proces tworzenia kopii zapasowej, aby oddzielić jeden z bardziej intensywnych serwerów do pełnej kopii zapasowej na własnym LTO, aby tymczasowo wstrzymać tę decyzję, ale wkrótce myślę, że będę musiał wybrać jedną z następujących opcji:
Kup napęd LTO-3 i skorzystaj z drugiej dostępnej taśmy fizycznej.Jest to mniej pożądana opcja i ma sens tylko wtedy, gdy dyski LTO-3 są znacznie tańsze niż dyski LTO-4, co nie ma miejsca.Kup napęd LTO-4 i używaj taśm LTO-4 do tworzenia pełnych kopii zapasowych i używaj taśm LTO-3 do różnicowania, aż taśmy LTO-3 zostaną obrócone i nowe taśmy LTO4 będą pasować do ceny taśm LTO3. To zapewne pozwoli mi przejść przez weekend do tworzenia kopii zapasowych przez wiele lat bez konieczności wymiany taśm. Częściowo dotyczy to również czyszczenia obuwia, ponieważ LTO4 ma niższą minimalną prędkość niż LTO3.
Kup coś, co może automatycznie podawać taśmy. Zakładam, że nie mogę nic dodać do PowerVault 110T, a to oznaczałoby zakup nowego urządzenia, które ma taśmę i moduł ładujący w jednym urządzeniu. Prawdopodobnie nie jest to opłacalne w porównaniu do samego napędu i ręcznego ładowania taśm, ale przejście do automatycznego ładowania LTO4 byłoby najwygodniejszym rozwiązaniem. Pozwolę szefowi nade mną decydować między napędem pojedynczym a napędem automatycznym.
Evan Anderson wspomniał w innym rozwiązaniu, że można kupić dyski w tym przedziale cenowym
LTO-4 (internal drive, 1 tape / day) - $2,766.00
LTO-4 (autoloader, 1 tape / day) - $4,566.00
ale nie znam szczegółów na temat tego, co on lub ty polecilibyście dla rzeczywistego napędu i, jeśli to konieczne, kontrolera. Pokaż mi nowy adres URL (albo Dell, HP lub cokolwiek by to był twój ulubiony dostawca) dla twojego rozwiązania, jeśli nie masz nic przeciwko wyszukaniu go lub po prostu daj mi markę i numer modelu, a chętnie to zrobię noga sama pracuje.
Chcę dokonać potrzebnego zakupu, zanim ten zapasowy obrót stanie się zbyt kłopotliwy. Prawdopodobnie mam kilka miesięcy.
Xenny wspomina o wieku serwerów i szybkości tworzenia kopii zapasowych. Serwer Exchange ma 6 lat (choć dyski twarde są znacznie nowsze). Istnieje kilka 4-letnich serwerów w połączeniu z dyskami sata klasy konsumenckiej (WD6400AAKS). Serwery, które uważam za „nowe”, mają w tym momencie 2 lata.
Tworzenie kopii zapasowej na dysk ze starego serwera Exchange było tak szybkie, jak 2184 MB / min, ale ogólnie tworzenie kopii zapasowej na dysk jest tak samo wolne jak tworzenie kopii zapasowej na taśmę w tej konfiguracji. W rzeczywistości tworzenie kopii zapasowej na dysku jest czasem wolniejsze niż tworzenie kopii zapasowej na napędzie taśmowym LTO-3. Miałem również problemy z awariami dysków i brakiem wnęk na dodawanie kolejnych dysków. Ogólnie rzecz biorąc, tworzenie kopii zapasowych na dysku jest jeszcze większym problemem niż przejście LTO3 / 4, ale to dotyczy innego problemu z awarią serwera, jeśli chciałbym uzyskać informacje na ten temat.
Po prostu wybiorę kilka liczb z ostatniej kopii zapasowej, aby dać ci wyobrażenie o prędkościach. To nie jest pełna lista, ale daje wyobrażenie o różnych prędkościach. Planuję zaktualizować to wkrótce w formacie oldspeed MB / min gazeta MB / min, gdzie oldspeed to stary SCSI 320 LTO3, a gazeta to SAS LTO4.
DC C: ~ 850 MB / min
Stan systemu DC ~ 700 MB / min
Exchange Server C: i stan systemu ~ 500 MB / min ~ 600 MB / min
Exchange Server D: ~ 1400 MB / min ~ 1200 MB / min
Exchange Server Najpierw Grupa pamięci ~ 1100 MB / min ~ 700 MB / min
Serwer sieci C: ~ 600 MB / min ~ 950 MB / min
Serwer sieci E: ~ 1700 MB / min ~ 1950 MB / min
Serwer plików C: ~ 500 MB / min
Serwer plików E: ~ 1500 MB / min ~ 2200 MB / min
Fileserver G: ~ 1800 MB / min ~ 2400 MB / min
Stan systemu Fileserver ~ 650 MB / min
faksserver C: ~ 400 MB / min ~ 550 MB / min
Serwer rachunkowości C: ~ 1300 MB / min ~ 1775 MB / min
Serwer rachunkowości D: ~ 1500 MB / min ~ 2250 MB / min
Rachunek SQL wystąpienie ~ 1600 MB / min
serwer aplikacji C: i stan systemu ~ 700 MB / min ~ 900
Serwer kopii zapasowych MB / min C: 700 MB / min ~ 1800 MB / min
serwer kopii zapasowych E: 1350 MB / min ~ 2900 MB / min
Monitorowanie serwera plików Widziałem liczby, które sprawiają, że myślę, że kontroler RAID powstrzymuje prędkości transferu. Kontrolerem jest SATA 1.5, ale dyski są w stanie 3.0. Zauważyłem po zmianie woluminów z RAID 1 na RAID 10 i braku przyspieszenia kopii zapasowych. Niestety podwojenie prędkości odczytu nie miało wpływu na tworzenie kopii zapasowej na napędzie taśm LTO3.
Ogólnie rzecz biorąc, tworzenie kopii zapasowych bezpośrednio do LTO daje mi przyzwoity punkt odniesienia, gdzie moje serwery są ograniczone we / wy. Serwery, które wykonują kopie zapasowe poniżej 1500 MB / min, są ogólnie wolne pod względem dysku, a serwery pomiędzy nimi a 2400 MB / min są nadal niskopowłokowe. Na przykład serwer Exchange 2003 ma mało miejsca na dysku i kontynuuje rozszerzanie bazy danych dla pierwszej grupy pamięci do wolniejszych części dysków. Serwer ten zostanie zastąpiony serwerem Exchange 2010 z szybszymi procesorami i większą liczbą dysków. Inne serwery otrzymają aktualizacje dysków i / lub dyski SSD.
http://en.wikipedia.org/wiki/Tape_drive wspomina: „Gdy pojawia się czyszczenie butów, ma to znaczący wpływ na osiągalną szybkość przesyłania danych, a także żywotność napędu i taśmy”. ale nie wspominając o błyszczeniu obuwia, zmniejszając efektywną pojemność taśmy. Po przejrzeniu archiwalnych taśm z banku mogę potwierdzić, że na taśmach LTO3 zmarnowano około 2–15% miejsca. Nigdzie na tyle blisko, by powstrzymać mnie od przejścia na LTO4 lub autoloader, ale może to być znaczące. Dla tych z Backup Backup możesz obliczyć ilość odpadów związanych z płukaniem obuwia poprzez:
- Wykonanie zadania kopii zapasowej, które wykona kopię zapasową około 100% natywnej pojemności taśm bez kompresji. Wyłącz kompresję na dysku i oprogramowaniu podczas uruchamiania testu.
- spójrz na kartę Media Backup Exec i porównaj kolumnę „Wykorzystana pojemność” z kolumną „Dane”. Jeśli kompresja jest wyłączona, a liczby się zgadzają, wcale nie robisz czyszczenia butów.
W moim przypadku miałem archiwalną taśmę LTO3 z 272,4 GB „zużytymi”, ale tylko 233,67 GB „danych” i kolejną z 400,6 GB w porównaniu do 395,19 GB. Próbowałem także wykonać kopię zapasową na LTO4 bez kompresji i otrzymałem 833 GB „wykorzystanych” z jedynie 786,77 GB „danych”. Oczywiście czyszczenie butów będzie się różnić w zależności od mojego środowiska, ale wcześniej nie pomyślałem o przetestowaniu go. Mamy nadzieję, że dzięki temu dowiesz się, jak dużo zmarnowanej taśmy masz w środowisku tworzenia kopii zapasowych.
edycja: nowe informacje na http://www.fujifilmusa.com/shared/bin/LTO_Overview.pdf pokazujące minimalne prędkości taśmy dla LTO3 i LTO4. Wygląda na to, że IBM LTO4 faktycznie ma niższą minimalną prędkość niż IBM LTO3. Tak czy inaczej mój przeciętny serwer jest zbyt wolny, aby karmić LTO3 / 4 bez czyszczenia butów. Obawiam się, że nawet tworzenie kopii zapasowych na lokalnych woluminach dyskowych będzie zbyt wolne, aby szybko zasilić dysk, ale będę musiał to przetestować.
Pobieram informacje o dysku IBM o pełnej wysokości z pliku PDF powyżej
LTO4 : 30-120MB/s 800GB native (45-240MB/s compressed)
LTO3 : 40- 80MB/s 400GB native (60-160MB/s compressed)
LTO2 : 18- 35MB/s 200GB native (27- 70MB/s compressed)
LTO1 : 15- 15MB/s 100GB native (30- 30MB/s compressed)
Aktualizacja : serwer, którego używałem do tworzenia kopii zapasowych, zaczął powodować błędy zatrzymania, więc przeniosłem napęd taśmowy na inny serwer. Stary kontroler SCSI był Adaptec 160, „nowy” kontroler jest oparty na LSI 320 (przynajmniej zakładam, że zewnętrzne złącze to 320, ponieważ 4 dyski twarde wewnątrz serwera wspominają o 320 SCSI w zarządzaniu serwerem).
Nowa sytuacja na serwerze pozostawia mi tymczasowo kopię zapasową na dysku, dopóki nie otrzymam zewnętrznej obudowy dla bezpośrednio podłączonego magazynu. Ogólnie rzecz biorąc, ta dyskusja LTO skłoniła mnie do zakupu większej ilości dysków twardych dla moich serwerów. Będę musiał wykonać rekonfigurację macierzy RAID w celu zwiększenia szybkości tworzenia kopii zapasowej i, mam nadzieję, zwiększenia niezawodności ogólnej konfiguracji.
Aktualizacja 2 : Poniższe porównanie wykorzystuje stary serwer plików, którego wąskie gardło kontrolera RAID powoduje wszystkie transfery przy ~ 40 MB / s, więc idealnie byłoby około 2400 MB / min. Chodzi o szybkość potrzebną do przetestowania krawędzi błyszczącego obuwia. Przypuszczalnie przepływ danych nie będzie idealnie regularny i wymusi dopasowanie prędkości prawie do końca testu.
Nie znam już wielkości bufora i liczby buforów, których użyłem w teście prędkości starego napędu LTO3, ale to wcale go nie zmienia, ale zyskałem może 100 MB / min przez dostrojenie buforów. Dane testowe to około 20 GB zeskanowanych plików tif i jpg. Zrobiłem te testy w piątek po południu i nie powtórzyłem testów wystarczająco często, aby uśrednić dane lub w inny sposób usunąć nieprawidłowe dane. Testowanie po godzinach, wybór różnych danych i innych zmiennych może znacząco wpłynąć na te testy.
Te same serwery są używane we wszystkich testach. Stary dysk znajduje się na kontrolerze 320 SCSI LVD, czyli PCIx. Nowy dysk znajduje się w kontrolerze PCIe LSI 3801E SAS. Możliwe jest, że kontroler napędu i / lub napęd taśm LTO3 stanowią wąskie gardła. Nie będę testował poszczególnych elementów, tylko starą parę z nową. Serwer, na którym działa Backup Exec, ma 4 GB pamięci RAM, standard 32-bitowy Server 2008, dwurdzeniowy procesor Pentium D 3,2 GHz.
Łączność sieciowa odbywa się za pomocą przełącznika 1 Gb, oba serwery są na tym samym przełączniku. Mam otwarte połączenie pulpitu zdalnego, ale z kontynuacją tworzenia kopii zapasowej + połączenie Gb jest wykorzystywane w mniej niż 50% w najgorszym przypadku i średnio wynosi około 25%.
Tak szorstkie, jak metody testowe, jestem dość pewny, że wąskie gardła nie występują w zmiennej, którą ignoruję.
Krótkie wyniki testu :
~ 1500 MB / min przy włączonym napędzie Dell LTO3 i włączonej kompresji taśmy LTO3, rozmiar bloku 64 KB (przetestowano wiele buforów, najlepszy wynik tutaj)
~ 1800 MB / min przy użyciu napędu LTO 4 Quantum Superloader3 z taśmą LTO3 (ta sama taśma jak powyżej) kompresja WŁ., Rozmiar bloku 64 KB, rozmiar buforu 64 KB, liczba buforów 10, liczba wysokich wód 0, zapis Tryb pojedynczego bloku włączony, zapis SCSI pass- przez tryb WŁĄCZONY
~ 2150 MB / min przy użyciu napędu LTO 4 Quantum Superloader3 z taśmą LTO3 (ta sama taśma jak powyżej) kompresja WŁ., Rozmiar bloku 256 KB, rozmiar bufora 256 KB, liczba buforów 10, liczba wysokich wód 0, zapis Tryb pojedynczego bloku włączony, zapis SCSI pass- przez tryb WŁĄCZONY
~ 2200 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z taśmą LTO3 (ta sama taśma jak powyżej) kompresja WYŁ., rozmiar bloku 256 KB, rozmiar bufora 256 KB, liczba buforów 10, liczba wysokich wód 0, zapis Tryb pojedynczego bloku włączony, zapis Tryb tranzytowy SCSI WŁ
~ 2050 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z włączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 256 KB, liczba buforów 10, liczba dużych wód 0, tryb zapisu pojedynczego bloku włączony, tryb tranzytu zapisu SCSI włączony
~ 2250 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z wyłączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 256 KB, liczba buforów 10, liczba dużych wód 0, zapis Tryb pojedynczego bloku włączony, zapis trybu tranzytowego SCSI włączony
~ 2050 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z włączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 1 MB, liczba buforów 10, liczba wysokich wód 0, tryb zapisu pojedynczego bloku włączony, tryb tranzytu zapisu SCSI włączony
~ 2300 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z wyłączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 1 MB, liczba buforów 10, liczba dużych wód 0, zapis Tryb pojedynczego bloku włączony, zapis trybu tranzytowego SCSI włączony
~ 2200 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z włączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 1 MB, liczba buforów 20, liczba dużych wód 0, zapis Tryb pojedynczego bloku włączony, zapis trybu tranzytowego SCSI włączony
~ 2300 MB / min przy użyciu napędu Quantum Superloader3 LTO 4 z wyłączoną kompresją taśmy LTO4, rozmiar bloku 256 KB, rozmiar bufora 1 MB, liczba buforów 20, liczba dużych wód 0, zapis Tryb pojedynczego bloku włączony, zapis trybu tranzytowego SCSI włączony
Oczywiste jest, że rozmiar bloku strojenia jest ważniejszy niż rozmiar bufora. Bez względu na rozmiar używanego bloku lub bufora, uzyskasz lepszą wydajność wyłączając kompresję, jeśli dane źródłowe nie nadążą za minimalną szybkością dopasowywania danych przez napędy taśm. Niestety jest to ustawienie na dysk, a nie na zadanie lub format taśmy, więc nie można po prostu ograniczyć kompresji do pełnych kopii zapasowych lub tylko LTO3. Będziesz także musiał sprawdzić, na ile problem polega na połączeniu sprzętu / oprogramowania. Oczywiście spadek wydajności jest niewielki, a ważniejsze testy polegają na optymalizacji pełnej kopii zapasowej o pojemności od 600 GB do 800 GB zamiast 20 GB. Spróbuję zaktualizować ponownie, gdy mam kilka tygodni lub miesięcy tworzenia kopii zapasowych.