kopie zapasowe
Transkrypt
kopie zapasowe
Film dostępny na: https://youtu.be/PkZjy-4PJsU Daniel Olkowski EMC©Data Europe CopyrightProtection 2014 EMC Corporation. All rightsEAST reserved. Jak przechowywać kopie zapasowe przez wiele lat? 1 Środowisko backupowe © Copyright 2014 EMC Corporation. All rights reserved. 2 Środowisko backupowe © Copyright 2014 EMC Corporation. All rights reserved. 3 Backup & odtwarzanie czyli Data Domain (de-duplikacja) © Copyright 2014 EMC Corporation. All rights reserved. 4 Backup & odtworzenie operacyjne Backup LAN/FC Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 5 Backup & odtworzenie operacyjne • Backupujemy / Odtwarzamy – – – – Bazy Maszyny wirtualne Pliki Aplikacje © Copyright 2014 EMC Corporation. All rights reserved. 6 Backup & odtworzenie operacyjne • Backupujemy / odtwarzamy całe środowisko – – – – – Maszyny krytyczne dla działania naszego przedsiębiorstwa Systemy produkcyjne Systemy deweloperskie Systemy testowe Dane użytkowników © Copyright 2014 EMC Corporation. All rights reserved. 7 Backup & odtworzenie operacyjne • Wydajność – Szybki backup – Szybkie odtworzenie • Brak obciążenia produkcji backupem • Disaster Recovery • Bogata funkcjonalność © Copyright 2014 EMC Corporation. All rights reserved. 8 Backup & restore operacyjne 1. Błyskawiczny backup 2. Transfer tylko zmienionych danych z zabezpieczanych środowisk (BOOST) 3. Odczyt z dysku tylko zmienionych danych -> backup pełny (Virtual Synthetic) 4. Bardzo duża wydajność odtworzenia (do 15TB/h) 5. Transfer 1%-3% danych do ośrodka zapasowego > Odtworzenie 100% 6. Minimalizacji kosztów (najlepsza na rynku deduplikacja) 7. Wsparcie dla dowolnego oprogramowania Backup LAN/FC 8. Backup bez systemu backupu 9. Dostępność 24*7 10.Podział na logiczne części z kontrolą dostępu (zachowanie globalnej de-duplikacji) 11.Rozliczanie Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 9 Data Domain -> Disaster Recovery Ośrodek zapasowy Ośrodek podstawowy Linux, UNIX, Windows, Linux, UNIX, Windows, Aplikacje, Bazy, Poczta Bazy Aplikacje, Bazy, Poczta Poczta Serwer backupu Media agent SAN r 1% - 3% Data Domain © Copyright 2014 EMC Corporation. All rights reserved. Replikacja Data Domain 10 Odtworzenie operacyjne • Ponad 90% odtworzeń z ostatniego tygodnia. • Ponad 99,…% odtworzeń z ostatniego kwartału © Copyright 2014 EMC Corporation. All rights reserved. 11 Odtworzenie operacyjne • Ponad 90% odtworzeń z ostatniego tygodnia. Najczęściej odtwarzamy dane za • Ponad 99,…% odtworzeń z ostatniego kwartału ostatnie 2 tygodnie • Czy odtwarzamy produkcję z kopii starszej niż dwa tygodnie? • Czy zgłaszają się użytkownicy, że stracili pliki i Sporadycznie odtwarzamy dane zauważyli to po 6 miesiącach / 2 latach? starsze niż kwartał © Copyright 2014 EMC Corporation. All rights reserved. 12 Ile jest wspólnych danych? Dziś © Copyright 2014 EMC Corporation. All rights reserved. 13 Ile jest wspólnych danych? Jutro Dziś Kolejny dzień 0,1% do 3% różnicy danych © Copyright 2014 EMC Corporation. All rights reserved. 14 Ile jest wspólnych danych? Jutro Dziś Kolejny dzień 0,1% do 3% różnicy danych 1% Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 1% Data Domain 15 Ile jest wspólnych danych? Jutro Dziś Kolejny dzień 0,1% do 3% różnicy danych 1% Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 1% Data Domain 16 Ile jest wspólnych danych? Jutro Dziś Najlepsza na rynku Kolejny dzień de-duplikacja 0,1% do 3% różnicy danych Zmienny blok 4K – 12K 1% Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 1% Data Domain 17 Ile jest wspólnych danych? Retencja do Dziś Jutro 1 rok Najlepsza na rynku Kolejny dzień de-duplikacja 0,1% do 3% różnicy danych Zmienny blok 4K – 12K 1% Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 1% Data Domain 18 Gdy retencja dłuższa niż rok © Copyright 2014 EMC Corporation. All rights reserved. 19 Dlaczego musimy przechowywać dane dłużej niż rok? • Wymogi prawne • Przepisy wewnętrzne • ... © Copyright 2014 EMC Corporation. All rights reserved. 20 Ile jest wspólnych danych? Dziś © Copyright 2014 EMC Corporation. All rights reserved. Za 1 rok 21 Ile jest wspólnych danych? Za 1 rok Dziś Różnica może dochodzić do 30%-50% © Copyright 2014 EMC Corporation. All rights reserved. 22 Ile jest wspólnych danych? Dziś Za 1 rok Różnica może W ciągu 5 lat dane mogą się dochodzić do 30%-50% różnić kilkukrotnie © Copyright 2014 EMC Corporation. All rights reserved. 23 Częstotliwość odtworzeń • Rzadkie odtworzenie danych – Raz na kilka miesięcy lub rządziej • Nie potrzebujemy wydajności odtworzenia Data Domain © Copyright 2014 EMC Corporation. All rights reserved. 24 Częstotliwość odtworzeń Dla retencji powyżej jednego • Rzadkie odtworzenie danych roku – Raz na kilka miesięcy lub rządziej • potrzebujemy Nie skorzystamy z wydajności Data Domain • Nie wydajności odtworzenia Data (praktycznie nie odtwarzamy) Domain • Nie skorzystamy de-duplikacji Data Domain (zwykle mała powtarzalność danych między obrazami danych różniącymi się o wiele lat) © Copyright 2014 EMC Corporation. All rights reserved. 25 Media Server / Storage Node Data Domain • • Retencja 1-3 miesiące Błyskawiczny backup / odtworzenie Niski koszt © Copyright 2014 EMC Corporation. All rights reserved. Backup LAN/FC Proces klonowania Dane długoterminowe Retencja 5 lat / 10 lat / … 26 Informacje od użytkowników Media Server / Storage Node Data Domain • • Retencja 1-3 miesiące Błyskawiczny backup / odtworzenie Niski koszt © Copyright 2014 EMC Corporation. All rights reserved. Backup LAN/FC Proces klonowania Dane długoterminowe Retencja 5 lat / 10 lat / … 27 Problemy • Utrzymanie – Awaryjność – Skomplikowana konfiguracja • SAN • Serwery dostępowe • Konfiguracja w oprogramowaniu backupowym © Copyright 2014 EMC Corporation. All rights reserved. 28 Problemy • Wysokie koszty – Przechowywanie taśm • W ramach biblioteki wysokie koszty – Koszt biblioteki – Koszt serwerowni • Przestrzeń serwisowa • Dedykowane pomieszczenie – Wynoszenie taśm – Katalogowanie – Utrzymanie temperatury / wilgotności – Przewijanie taśm © Copyright 2014 EMC Corporation. All rights reserved. 29 Problemy • Migracja między technologiami © Copyright 2014 EMC Corporation. All rights reserved. 30 Tabela kompatybilności technologii LTO © Copyright 2014 EMC Corporation. All rights reserved. 31 Tabela kompatybilności technologii LTO • Wiarygodność – Jaką mam gwarancję, że taśma nie jest uszkodzona? – Ile powinienem zrobić kopii by mieć pewność, że odzyskam dane? – Co jeśli backup jest na kilku taśmach? • Uszkodzenie fragmentu jednej taśmy uniemożliwia odtworzenie całości © Copyright 2014 EMC Corporation. All rights reserved. 32 Czy jest alternatywa dla taśmy? © Copyright 2014 EMC Corporation. All rights reserved. 33 Storage Node Media Server CloudBOOST Data Domain • • Retencja 1-3 miesiące Błyskawiczny backup / odtworzenie Niski koszt © Copyright 2014 EMC Corporation. All rights reserved. Backup LAN/FC Proces klonowania ECS Dane długoterminowe De-duplikacja 1:6 do 1:20 Retencja 5 lat / 10 lat / … 34 vs. © Copyright 2014 EMC Corporation. All rights reserved. ECS 35 ECS Dlaczego vs. ECS? Retencja 5 lat / 10 lat / … © Copyright 2014 EMC Corporation. All rights reserved. 36 1. Niższe koszty 2. Eliminacja czynności manualnych W pełni automatyczny proces 3. Pewność posiadania danych ECS 4. Eliminacja mechanicznych urządzeń (naprawy, utrzymanie, itp.) 5. Eliminacja pomieszczeń z taśmami (Wymagane ścisłe parametry) 6. Eliminacja migracji technologii taśmowych Retencja wieloletnia 7. Eliminacja okresowego przewijania taśm 8. Proste Disaster Recovery 9. Prostsza konfiguracja w systemie backupu © Copyright 2014 EMC Corporation. All rights reserved. 37 Najważniejszy element: Koszt © Copyright 2014 EMC Corporation. All rights reserved. 38 Koszt 1TB przestrzeni systemu ECS Koszt List Price przestrzeni netto: 760 Euro za 1TB Koszt przestrzeni przyjmując współczynnik de-duplikacji 1:20: Storage Node 38 Euro za 1TB Media Server CloudBOOST Data Domain Retencja 1-3 miesiące Bieżący backup / odtworzenie © Copyright 2014 EMC Corporation. All rights reserved. Backup LAN/FC Proces klonowania Dane długoterminowe De-duplikacja 1:6 do 1:20 ECS Retencja 5 lat / 10 lat / … 39 Co powinniśmy uwzględnić w TCO? • Koszt zakupu – Uwzględnienie, że taśmy nigdy nie są w pełni zapełniane • Przyjmuje się 25% przestrzeni niewykorzystanej na taśmach. • Miejsce w szafie – Przestrzeń serwisowa • Koszt replikacji / wynoszenia backupów • Migracja do nowych technologii © Copyright 2014 EMC Corporation. All rights reserved. 40 Ile potrzebuję systemu ECS dla swoich danych? © Copyright 2014 EMC Corporation. All rights reserved. 41 Ile potrzebuje przestrzeni ECS? Oszacowanie wielkości storage'u dla długoterminowego przechowywania backupów Liczba eksportów Liczba danych do backupu na backupu długoterminowe [TB] media miesięcznie Liczba miesięcy 80 1 12 Liczba lat 5 Liczba danych przechowywanych jako długoterminowy backup [TB] 4800 Oszacowanie wielkości potrzebnej przestrzeni ECS Wymagana Liczba danych Współczynnik przestrzeń ECS [TB] de-duplikacji (1:x) [TB] 4800 20 240 © Copyright 2014 EMC Corporation. All rights reserved. Koszt za TB ECS [Euro] 760 42 Ile potrzebuje przestrzeni ECS vs biblioteka taśmowa? Oszacowanie wielkości storage'u dla długoterminowego przechowywania backupów Liczba eksportów Liczba danych do backupu na backupu długoterminowe [TB] media miesięcznie Liczba miesięcy 80 1 12 Liczba lat 5 Liczba danych przechowywanych jako długoterminowy backup [TB] 4800 Oszacowanie wielkości potrzebnej przestrzeni ECS Wymagana Liczba danych Współczynnik przestrzeń ECS [TB] de-duplikacji (1:x) [TB] 4800 20 240 Koszt za TB ECS [Euro] 760 Oszacowanie wielkości potrzebnej przestrzeni biblioteki taśmowej Pojemnośc taśmy Pojemnośc taśmy LTOLiczba danych LTO-6 Współczynnik 6 po kompresji [TB] [TB] kompresji (1:x) [TB] 4800 2,5 2 5 © Copyright 2014 EMC Corporation. All rights reserved. Liczba taśm 960 43 Koszt ECS vs biblioteka taśmowa? Oszacowanie wielkości storage'u dla długoterminowego przechowywania backupów Liczba eksportów Liczba danych do backupu na backupu długoterminowe [TB] media miesięcznie Liczba miesięcy 80 1 12 Liczba lat 5 Liczba danych przechowywanych jako długoterminowy backup [TB] 4800 Oszacowanie wielkości potrzebnej przestrzeni ECS Wymagana Liczba danych Współczynnik przestrzeń ECS [TB] de-duplikacji (1:x) [TB] 4800 20 240 Koszt List Price systemu ECS wymaganego do Koszt za TB ECS przechowyania backupów [Euro] przez określoną lat 760 182 400 Oszacowanie wielkości potrzebnej przestrzeni biblioteki taśmowej Liczba danych [TB] 4800 Pojemnośc taśmy Pojemnośc taśmy LTOLTO-6 Współczynnik 6 po kompresji [TB] kompresji (1:x) [TB] 2,5 2 5 © Copyright 2014 EMC Corporation. All rights reserved. Liczba taśm 960 Koszt List Price systemu bibliotecznego 1100 slotów, 8 napędów [Euro] 324 000 Całkowity koszt systemu bibliotecznego Koszt List Price 1100 1100 slotów, 8 taśm napędów, 1100 taśm [Euro] [Euro] 44 000 368 000 44 Koszt ECS vs biblioteka taśmowa? Mam 20TB danych i wyrzucam dane raz na tydzień © Copyright 2014 EMC Corporation. All rights reserved. 45 Koszt ECS vs biblioteka taśmowa? Oszacowanie wielkości storage'u dla długoterminowego przechowywania backupów Liczba eksportów Liczba danych do backupu na backupu długoterminowe [TB] media miesięcznie Liczba miesięcy 20 4 12 Liczba lat 5 Liczba danych przechowywanych jako długoterminowy backup [TB] 4800 Oszacowanie wielkości potrzebnej przestrzeni ECS Wymagana Liczba danych Współczynnik przestrzeń ECS [TB] de-duplikacji (1:x) [TB] 4800 20 240 Koszt List Price systemu ECS wymaganego do Koszt za TB ECS przechowyania backupów [Euro] przez określoną lat 760 182 400 Oszacowanie wielkości potrzebnej przestrzeni biblioteki taśmowej Liczba danych [TB] 4800 Pojemnośc taśmy Pojemnośc taśmy LTOLTO-6 Współczynnik 6 po kompresji [TB] kompresji (1:x) [TB] 2,5 2 5 © Copyright 2014 EMC Corporation. All rights reserved. Liczba taśm 960 Koszt List Price systemu bibliotecznego 1100 slotów, 8 napędów [Euro] 324 000 Całkowity koszt systemu bibliotecznego Koszt List Price 1100 1100 slotów, 8 taśm napędów, 1100 taśm [Euro] [Euro] 44 000 368 000 46 Jakie systemy backupu potrafią rozmawiać z ECS? © Copyright 2014 EMC Corporation. All rights reserved. 47 Jakie systemy backupu wspierają poniższą architekturę? Storage Node Media Server CloudBOOST Data Domain • • Retencja 1-3 miesiące Błyskawiczny backup / odtworzenie Niski koszt © Copyright 2014 EMC Corporation. All rights reserved. Backup LAN/FC Proces klonowania ECS Dane długoterminowe De-duplikacja 1:6 do 1:20 Retencja 5 lat / 10 lat / … 48 Jakie systemy backupu wspierają poniższą architekturę? NetWorker Avamar NetBackup Storage Node Pozostałe po uzyskaniu Media Server CloudBOOST zgody Product Manager EMC Backup Data Domain • • Retencja 1-3 miesiące Błyskawiczny backup / odtworzenie Niski koszt © Copyright 2014 EMC Corporation. All rights reserved. ECS LAN/FC Proces klonowania Dane długoterminowe De-duplikacja 1:6 do 1:20 Retencja 5 lat / 10 lat / … 49 Jak pisać do ECS? • Protokoły obsługiwane przez ECS są wspierane natywnie przez – Commvault Simpana (Atmos / S3) – NetBackup 7.7+ (S3) – ... © Copyright 2014 EMC Corporation. All rights reserved. 50 CloudArray • ECS można wystawić jako CIFS/NFS – Moduł CloudArray • Wówczas każda aplikacja może pisać do ECS-a jako backup na dysk © Copyright 2014 EMC Corporation. All rights reserved. 51 Możliwości eksportu backupu na taśmy CloudBOOST © Copyright 2014 EMC Corporation. All rights reserved. Natywny z aplikacji backupowej (S3/Atmos) CloudArray (CIFS/NFS) 52 Konfiguracja backupu na ECS © Copyright 2014 EMC Corporation. All rights reserved. 53 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 54 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 55 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 56 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 57 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 58 NetWorker – Konfiguracja migracji do ECS © Copyright 2014 EMC Corporation. All rights reserved. 59 Czym jest ECS (storage obiektowy)? © Copyright 2014 EMC Corporation. All rights reserved. 60 Dlaczego ECS? • ECS został skonstruowany jako storage – Bezpieczny – Ekstremalnie tani • ECS ma za zadanie przechowywać – Dane archiwalne – Backupy – Pliki • Dostęp do plików – Z dowolnego miejsca – Z dowolnej aplikacji © Copyright 2014 EMC Corporation. All rights reserved. 61 Dlaczego ECS? © Copyright 2014 EMC Corporation. All rights reserved. 62 Dlaczego ECS? • Nieograniczona przestrzeń – CIFS / NFS wymaga podziału na LUNy o okreslonej wielkości • Zarządzanie • Nieograniczona liczba plików – 10 miliardów lub więcej – CIFS/NFS: Kilka milionów plików per kaltaog • Zarządzanie • Często limit na max liczbę plików – Kilkadziesiąt milionów – Kilkaset milionów © Copyright 2014 EMC Corporation. All rights reserved. 63 Dlaczego ECS? • Dowolna wielkość plików – Wsparcie dla miliardów małych plików – CIFS/NFS: Problem z • Małymi plikami • Dużą liczba małych plików © Copyright 2014 EMC Corporation. All rights reserved. 64 Dlaczego ECS? • Prosty dostęp – Jedyny parametr: Adres http – CIFS/NFS: • Adres http • Nazwa share – Konieczność pamiętania setek share’ów – Konieczność ręcznej konfiguracji w aplikacji / dla użytkowników © Copyright 2014 EMC Corporation. All rights reserved. 65 Dlaczego ECS? • Replikacja ECS Po prostu kolejna kopia danych Bez znaczenia czy lokalna czy zdalna Automatycznie replikowana między wszystkie instancje Możliwość protekcji między lokalizacjami (Archiwa Narodowe) – Replikacja na poziomie plików – – – – • Tylko plik jest replikowany © Copyright 2014 EMC Corporation. All rights reserved. 66 Dlaczego ECS? • Replikacja CIFS/NFS – Kalendarz replikacji • Zarządzanie – Każda lokalizacja oddzielna kopia – Replikacja na poziomie LUNów (różnica między LUN’ami) – Replikacja na bazie snapshotów • ograniczona liczba • zarządzanie © Copyright 2014 EMC Corporation. All rights reserved. 67 Dlaczego ECS? • ECS -> Dostęp do repliki – Aplikacja nie wie do którego ECS jest dostęp – DNS Load balancer przekierowuje • ecs.mojanazwa.comna na adres IP • Który jest najbliżej mojej lokalizacji • Który działa (w przypadku awarii innego node’) – Awaria ECS niezauważalna dla aplikacji / użytkowników © Copyright 2014 EMC Corporation. All rights reserved. 68 Dlaczego ECS? • CIFS/NFS -> Dostęp do repliki – W aplikacji zmieniamy wszystkie ścieżki na CIFS/NFS systemu który działa – W przypadku przywrócenia działania podstawowego urządzenia CIFS/NFS ponowna ręczna zmiana wszystkich ścieżek w aplikacjach / dla użytkowników – Brak automatycznego wyboru najbliższego urządzenia © Copyright 2014 EMC Corporation. All rights reserved. 69 Pytania? [email protected] © Copyright 2014 EMC Corporation. All rights reserved. 70