Unsere Erfahrungen

 
Projekt Beispiele

Migration eines DMS Shares um Platz zu gewinnen
Revisionssichere Migration

Projektdetails

#enaio, #robocopy, #DMS, #Stormax, #FLR

Revisionssichere FLR-Migration

Auftrag:
Aufgrund von Platzproblemen musste der Hauptshare eines Document Management Systems (DMS) auf ein anderes Volume kopiert werden.

Da die Daten Vorhaltezeiten von bis zu 30 Jahren haben, war es dem Kunden wichtig, einen Nachweis zu führen, dass alle Dateien kopiert wurden und sich auch der Inhalt nicht verändert hat.

Herausforderung:
Überprüfung des Kopiervorgangs von Robocopy mit unserem eigenen Tool Stormax, welches neben den Metadaten eines Objekts auch dessen Inhalt liest, und nach dem Scan die Daten von Quelle und Ziel abgleicht.

Durchführung:
Nach dem initialen und mehreren inkrementellen Kopierläufen konnte die reine Offlinezeit auf unter eine Stunde reduziert werden.

Der revisionssichere Nachweis der Aktion wurde im Nachgang auf Snapshots der Daten erzeugt, um dem Kunden möglichst früh wieder Zugriff einrichten zu können. Der darauffolgende Check zeigte keine Probleme.

Details:
DMS: Optimal Systems Enaio

Fakten:
Migration von ~4TB - 7 Millionen Dateien.

NAS-Transition von NetApp cdot und 7mode nach Dell Isilon und Unity
Superna Eyeglass: Failover für Isilon

Projektdetails

#DELL, #Unity, #ISILON, #SupernaEyeglass, #EM7, #InsightIQ, #ESRS

Auftrag:
Lösungsbau und Implementierung von Dell Unity und Dell Isilon in einem länderübergreifenden Netzwerk mit zahlreichen Tenants.

Ausfallsicheres Design für Unity im Active/Active Mode für Filesharing und Automated Failover Manager (AFM)

Ausfallsicheres Design für Isilon Cluster mit SyncIQ via Superna Eyeglass

Aufbau Monitoring und Alerting für die Systeme

Unterstützung bei der Datenmigration mit DataDobi

Herausforderung:
Implementierung von AFM und Superna Eyeglass, da beide Produkte noch einige Probleme aufwiesen, die mit dem Dell Support gelöst werden mussten.

Die strikte Netzwerktrennung des Kunden in multiplen Tenants, von denen einige auf dedizierten Netzwerkports konfiguriert werden mussten.

Technischer Scope: NAS-Transition von NetApp cdot und 7mode nach Dell Isilon und Unity

  • 4 Unity HA Cluster für multiple Tenants implementiert
  • 6 Isilon HA Cluster für multiple Tenants implementiert
  • 8 Isilon Cluster für Backup mit Veeam implementiert
  • Protokolle: NFS & CIFS
  • Antivirus Scanning mit ICAP / MacAfee
  • Snapshots mit Scheduler nach Datenkategorien
  • Replication mit SynqIQ
  • Cluster Failover mit Superna Eyeglass
  • Monitoring mit InsightIQ
  • Alerting mit EM7

Lösungsbau:

  • Role Based Access RBAC
  • Zugriffsberechtigungen für die Backup-Teams (Non-Standard)
  • Umsetzung einer administrativen Trennung der Betriebsteams nach Vorgabe
  • EMC Secure Connect Gateway

Standorte: Deutschland, europäisches Ausland

Projektdauer: 22 Monate

NAS & SAN-Umzug in Gesundheitseinrichtung
Ein Paket – viele Kleinteile

Projektdetails

Auftrag:
Inbetriebnahme von Unity, isilon, Metronodes, Cisco SAN-Switch und Superna Eyeglass. SAN-Migration von NetApp zu Unity mit Hilfe von Metronodes.

Herausforderung:
Live-Migration der Daten von NetApp zu Unity SAN ohne Unterbrechung der Anwendungen.

Technischer Scope NAS/NAS-Migration:

  • Netapp => / Dell Isilon / Dell Unity
  • Ein HA-Cluster mit Unity
  • Metrocluster mit Active/Active Gestaltung
  • Ein HA Cluster mit Isilon
  • Superna Eyeglass
  • NFS Datastores
  • iSCSI- und FC-LUNs
  • NFS Server auf Dell-Unity
  • NFS und SMB Server auf Isilon

Technischer Scope SAN-Migration:

  • SAN Fabric mit Dell MDS-9132 Switche implementiert
  • FC-Luns der NetApp und Dell-Unity mit Metro-Node-Metro visualisiert
  • KIS-Datenbank mit Metro-Node-Cluster Data-Mobility von NetApp auf Dell-Unity migriert

Administrativer Scope: Projektmanagement – stark ausgelasteter Kunde.

Protokolle: NFS, CIFS/SMB, iSCSI, FC

Specials:

  • Secure Connect Gateway implementiert
  • FC Lun Visualisierung für Zero Downtime

Projektdauer: Migration - ein Jahr

NAS Migration in nur einer Umschaltung für Supermarktkette
30+ TB in einer Umschaltung

Projektdetails

#NetApp #DellEMC #Perl #Go #Bash

Auftrag:
Migration von 50+ TB NAS Daten (NFS und SMB) von Dell eNas zu NetApp, Nachweis der vollständigen und fehlerfreien Migration mithilfe eines eigenen Tools

Herausforderung:
Kundenvorgabe für den SMB-Anteil der Daten war, die kompletten 30 Terabytes innerhalb eines Wochenendes in einer großen "Alles-oder-nichts" Umschaltung umzuziehen.

Durchführung:
Die zu migrierenden Daten gehörten zu zwei regional unterschiedlichen Teams, befanden sich aber in denselben Rechenzentren. Sämtliche Migrationen mussten daher die verschiedenen Vorgaben beider Teams berücksichtigen und individuell abgestimmt werden.

Für die "Alles-oder-nichts" SMB-Migration der über 30 Terabyte an einem Wochenende wurden umfangreiche Vorbereitungen getroffen. Problematische Dateien und Verzeichnisse konnten wir im Voraus erkennen und die Anzahl der Fehler in den Protokollen reduzieren bis sie entweder gelöst, oder dem Kunden bekannt und von ihm bestätigt waren. Allerdings waren die Protokolldateien jedes Synchronisierungsdeltas so groß, dass wir für diese Analyse kundenspezifische Tools entwickeln mussten.

Die SMB-Migration konnte dann erfolgreich innerhalb der knappen Zeitvorgaben durchgeführt werden, indem wir minutengenaue Arbeitsabläufe planten, detaillierte Protokolle erstellten und jeden Migrationsschritt mit allen beteiligten Parteien genau koordinierten.

Die Migrationen der NFS-Daten verliefen ebenfalls reibungslos und ohne Komplikationen. Die 20 TB konnten in mehrere einzelne Pakete aufgeteilt werden, um die Ausfallzeiten zu minimieren.

Technischer Scope NAS-Migration:

  • Dell VNX Systeme auf Dell eNAS / Dell Isilon
  • 20+ virtuelle Server
  • 50+ Volumes
  • 200+ Trees
  • 1.000+ NFS-Exports
  • 1.000+ CIFS-Shares
  • 2 RZ in Deutschland
  • Gesamtvolumen: 120+ TB

Administrativer Scope:

  • Technische Durchführung der Umschaltungen
  • Begleitung der lokalen Teams während der Downtimes

Specials:

  • Lösungsbau/Lösungsübersetzung eNAS -> NetApp
  • Anpassung bestehender Toolsets an Kundenumgebungen
  • Multiprotokoll (NFS/CIFS)
  • Mehrere Codepages: ISO-8859-15 / UTF8 / Unicode

Programmiersprachen:

  • bash
  • sed
  • awk
  • perl

Protokolle:

  • CIFS
  • NFS
  • CIFS/NFS

Projektdauer: 6 Monate

DMS Migration mit FLR
Das Jahr 2000 war ein Problem – und 2038 wird auch eines

Projektdetails

#DELL #VNX #Unity #emcopy #robocopy #epochdate #FLR

Datumsberechnungen mit Schwierigkeiten

Auftrag:
Der Datenspeicher eines Dokumentenmanagement Systems (DMS) sollte von einer Dell VNX auf eine Dell Unity umgezogen werden. Zur Sicherheit der Daten setzte der Kunde auf dem Filesystem File Level Retention (FLR) ein, damit Daten nicht versehentlich vor einem bestimmten Zeitpunkt gelöscht werden konnten.

Herausforderung:
Erste Tests ergaben, dass die Unity via CIFS keine Zeitstempel > 2038 verarbeiten konnte (Ablauf der Unix epoch Zeit). dynaMigs.net unterstütze den Hersteller bei der Behebung des Problems.

Aus Gründen der Abwärtskompatibilität behielt das Unity FLR die Übersetzung der Zeitstempel VNX Systemen bei, wobei der Zeitbereich von 2038 bis 2084 auf die Jahre 1940 - 1986 übersetzt wurde. Da der Server die Zeitstempel aber korrekt anzeigte, hat das Zielsystem diese nicht akzeptiert. dynaMigs.net entwickelte eine Methode, bei der mehrere Kopierläufe mit robocopy und emcopy dafür sorgten, dass die Zeitstempel, welche auf die Unity geschrieben wurden, die gewünschten Retention Zeiten korrekt abbildete.

Durchführung:
Migration inkl. revisionsicherer Prüfung der Migration durch Stormax.

Technischer Scope FLR-Migration:

  • Gesamtvolumen: 5TB
  • Shares: 1
  • DELL VNX -> DELL Unity

Administrativer Scope:

  • Test der Migrationsmöglichkeiten
  • Migration von Dateien, die laut Retention expired sind
  • Erweiterung der max. Retention auf 30 Jahre

Programmiersprachen:

  • bash
  • sed
  • awk
  • perl
  • C/C++

Protokoll: CIFS

Specials:

  • Debugging/Troubleshooting auf der Unity
  • Eskalationsmanagement und Kommunikation mit dem Dell Support
  • Troubleshooting, Tool-Entwicklung zur Situationsrettung

Tools:

  • Wireshark, tcpdump
  • emcopy
  • robocopy
  • Stormax

Projektdauer: 4 Monate

Vollautomatisierte NAS-Migrationen
Vollautomatisierte NAS-Migrationen für Rechenzentrumsbetreiber

Projektdetails

Auftrag:
Der Betreiber eines Rechenzentrums bietet seinen Kunden vollautomatisch provisionierten NAS-Storage an. Zur Ausbalancierung der Datenmengen sind immer wieder Migrationen notwendig. Die Durchführung muß vollständig automatisiert werden, sodaß zuverlässig kein Benutzereingriff erforderlich ist.

Herausforderung:
Die Migrationen müssen zwischen verschiedenen NAS-Filern von unterschiedlichen Herstellern stattfinden.

Durchführung:
dynaMigs hat die Migrations-Toolbox um eine Steuerung erweitert, die vollautomatisiert Migrationen und Umschaltungen durchführen kann. Diese Steuerung wurde in das bestehende Toolset des Betriebsteams integriert.


Daten & Fakten:

  • NAS-Filer: Dell-EMC und Netapp
  • Gesamtumfang: 80 Petabyte
  • Sprachen: Perl

Projektdauer: 12 Monate

Migration von 200+ NetApp Systeme auf EMC VNX
Wenn das Migrationstool der Wahl nicht funktioniert

Projektdetails

Auftrag:
Beim Wechsel eines Managed Storage Vertrags von NetApp/T-Systems zu EMC mussten 3,5PB mit ca. 1 Mrd. Dateien in 30 Lokationen rund um den Erdball migriert werden. Zusätzlich musste die komplette Steuerung der Downtimes incl. der Changekoordination übernommen werden.

Herausforderung:
Um alle Migrationen zentral steuern und gleichzeitig Bandbreite sparen zu können, entwickelte dynaMigs.net die Jobpipe. Dabei handelt es sich um eine Fernsteuerung für Linux und Windows, mit denen die einzelnen Kopierpakete zentral gestartet, aber lokal und parallelisiert abgearbeitet werden konnten.

Durchführung:
Das Auftreten von Windows Delayed Write Errors, war der Auslöser für die dynaMigs.net, eine Methode zur Überprüfung von Migrationen durch die Stormax Suite zu entwickeln. Das Tool ermöglicht es, Datenmigrationen auf die korrekte Durchführung zu überprüfen. Da Stormax die Daten mit einem anderen Algorithmus scannt als das Kopiertool, können auch Fehler bei emcopy, rsync und dem Filer selbst erkannt werden.

Technische Schritte:

  • Lösungsbau/Lösungsübersetzung Netapp > VNX
  • Nachdem die Lösung CTA mit NDMP Backupsimulation nicht den Anforderungen entsprach, musste ein völlig neuer Kopierprozess ausgearbeitet und implementiert werden
  • Anpassung bestehender Toolsets an Kundenumgebungen
  • Multiprotokoll (NFS/CIFS)
  • DFS / DDFS / Widelink-Übersetzung
  • Mehrere Codepages: ISO-8859-15 / UTF8 / Unicode
  • Entwicklung Revisionssicherer Migrationsprozess

Administrative Schritte:

  • Anpassungen der Change-Prozesse
  • Technische Durchführung der Umschaltungen
  • Begleitung der Downtimes (Umschaltkoordination, second- und third-level Support der Implementation Specialists)

Zahelen & Fakten:

  • 200+ NetApp-Frames (7Mode) zu Dell VNX 5400/5800
  • 1.800+ virtuelle Server
  • 3.500+ Volumes
  • 16.000+ Trees
  • 150.000+ NFS-Exports
  • 200.000+ CIFS-Shares
  • 30+ Standorte weltweit
  • Gesamtvolumen: 3,5+ PB

Programmiersprachen:

  • bash
  • sed
  • awk
  • perl
  • python
  • Visual Basic
  • C/C++

Protokolle:

  • CIFS
  • NFS
  • CIFS/NFS
  • FTP

Nationalitäten: Teams aus Ungarn, Rumänien, Indien, China, Südafrika, Brasilien, USA, Ägypten, UK, Australien, Japan

Projektdauer: drei Jahre

Lokales Windows-Verzeichnis zu NetApp Migration
Auch ein einzelnes Verzeichnis kann es in sich haben

Projektdetails

#NetApp #WindowsFileShare #robocopy #batch #powershell

Auftrag:
Migration eines 5TB großen Windows Datenverzeichnisses nach NetApp Cdot CIFS/SMB Verzeichnis mit revisionssicherem Vollständigkeitsnachweis

Herausforderung:
Geht man nach der Größe, sieht diese Migration nach einem Spaziergang aus. Das Verzeichnis setzt sich allerdings aus einer großen Anzahl kleiner Dateien und tief verschachtelten Strukturen, die immer wieder für Schwierigkeiten im Migrationsprozess sorgen.

Durchführung:
Da es sich um Live-Daten handelte, kopierten wir die Daten von den lokalen Verzeichnissen mit Robocopy Incremental Sync auf die NetApp Hardware. Durch den Einsatz unseres Audit-Tools Stormax konnten wir aufgetretene Unstimmigkeiten zwischen Quelle und Ziel erkennen und beseitigen.

Technischer Scope: Windows Local Storage to NAS Migration

  • Windows Local Folder => Netapp
  • SMB Share
  • Lokale Verzeichnisse mit Millionen von Dateien und Ordnern

Protokolle: CIFS/SMB

Tools:

  • Robocopy
  • Stormax

Projektdauer: ein Monat

Unterstützung bei Migration in Office365
Der Umgang mit Alternate Data Streams (ADS)

Projektdetails

#Office365, #Stormax, #ADS

Restriktionen von Microsoft Office 365 erfordern eine Vorabanalyse der Daten

Auftrag:
Der Kunde zieht seine 30.000 Mitarbeiterprofile ins Office365 um. Da sowohl für die Dateinamen als auch für die Metadaten - insbesondere Alternate Data Streams (ADS) - andere Restriktionen gelten als auf normalen NTFS / NAS Systemen, scheiterten die ersten Migrationsversuche des Kunden.

dynaMigs.net stellte Stormax zur Verfügung, um zielgerichtet sämtliche problematischen Dateien aufzuspüren. So konnten die Anwender entsprechende Änderungen vor der Migration vornehmen.

Herausforderung:
Als sich herausstellte, dass ADS ab einer gewissen Größe ebenfalls Probleme bereiteten, wurde Stormax um einen ADS Detektor erweitert, so dass auch diese Probleme gelöst werden konnten.

Projektlaufzeit: 30 Monate

Datenassessment und Migration bei einem Softwarehersteller
Auf die Anzahl der Objekte kommt es an

Projektdetails

Auftrag:
Migration mehrerer hundert Terabyte auf eine neue Storage-Infrastruktur (von Dell-EMC Unity zu Dell-EMC Isilon/PowerScale).

Herausforderungen:
#1: Nicht das Datenvolumen, sondern die immense Anzahl der zu migrierenden Objekte. Es mussten nämlich etwa 5 Mrd inodes umgezogen werden, mit der Vorgabe, die Umschaltzeit so kurz wie möglich zu halten.

#2: Die Migration musste unter möglichst geringer Belastung der WAN-Verbindung durchgeführt werden.

Durchführung:
Durch unseren Vorab-Analyse-Scan des gesamten Datenbestands konnten wir einige Bereiche identifizieren, die vorab kopieren werden konnten und so die zeitkritische Umschaltung entzerren.

Mithilfe des Analyse-Scan und dem Einsatz weiterer technischer Maßnahmen konnten wir die Umschaltdauer auf unter eine Stunde senken. In dieser Umschaltzeit war der Nachweis inbegriffen, dass jedes einzelnen Objekt fehlerfrei übertragen wurde.

Der Produktivbetrieb des Unternehmens wurde in keiner Weise beeinträchtigt und die Zielcluster wurden bei möglichst geringer Belastung der WAN-Verbindung befüllt. Doppelte Kopiervorgänge waren hierfür unsere Lösung.

 Daten & Fakten:

  • Quellsystem: Dell-EMC Unity
  • Zielsystem: Zwei Powerscale-Cluster an verschiedenen Standorten
  • Anzahl inodes: ~5 Mrd
  • Umfang Nutzdaten: 400 TB
  • Umfang Metadaten: 80 TB

IT-Betriebsunterstützung für ein Krankenhaus
Viele Details müssen koordiniert werden

Projektdetails

#DellUnity #Isilon #PowerScale #DellMetronodes #Ciscomds #SupernaEyeglass

Auftrag:
Management der Storage Infrastruktur

Herausforderung:
#1: Komplexes Setup mit unterschiedlichen Herstellern, Lösungen und Applikationen.

#2: Das lokale IT-Team ist stark ausgelastet und hat viele andere Aufgaben und Projekte.

Implementation:
Als Grundlage für eine effektive Unterstützung und Fehlerbehebung fertigen wir zunächst einen genauen Plan der gesamten Speicherstruktur an. Wir behalten den Überblick über anstehende Upgrades, notwendige technische Änderungen und regulatorische Anpassungen. Auf Wunsch unterstützen wir bei Entscheidungsprozessen.

Zusätzlich arbeiten wir an der Optimierung der Koordination und Kommunikation mit dem IT-Team, um den Kunden bestmöglich unterstützen zu können.

NAS-Migration für Supermarktkette
Klein aber kritisch

Detaillierte Projektbeschreibung

#NetApp #DellEMC #Unity #Perl #Go #Bash

Auftrag:
Migration von mehreren zehn Terabyte NAS-Daten (NFS und SMB) von NetApp zu Dell Unity mit anschließender Integritätsprüfung der migrierten Daten mit einem separaten Verifizierungstool.

Herausforderung:
Obwohl der Umfang der Migration im Vergleich zu anderen von uns durchgeführten Projekten nicht groß war, bedurfte es einer sorgfältigen Planung für die Umstellung, da geschäftskritische Anwendungen auf der NAS-Umgebung des Kunden liefen.

Durchführung:
Vor der Umstellung wurden regelmäßige Synchronisationen durchgeführt, um die Ausfallzeiten zu verringern und eine Abschätzung der Downtime zu ermöglichen. Die Daten wurden dann erfolgreich und ohne Komplikationen migriert. Die Überprüfung der Integrität der migrierten Daten ergab keine Unterschiede zwischen Migrations-Quelle und -Ziel.

Technischer Scope NAS-Migration:

  • von NetApp zu Dell Unity
  • 4 Virtuelle Server
  • ~20 Volumes
  • ~150 Trees, Hälfte NFS, andere Hälfte SMB
  • Infrastruktur über 2 Rechenzentren in Deutschland verteilt
  • Migrations Volumen insgesamt: ~20 TB

Projektdauer: 6 Monate

NAS-Migration wegen Herstellerwechsel bei einem Konzern in der Automotive-Branche
Revisionssichere Migration des gesamten Datenbestandes

Projektdetails

Auftrag:
Ein Hersteller in der Automotive-Branche will seinen gesamten Datenbestand von Dell-EMC VNX auf Dell-EMC Unity migrieren.

Herausforderungen:
#1: Das IMT (Inband Migration Tool), das der Hersteller für genau dieses Szenario bereitstellt, kann wegen besonderer Anforderungen nicht für alle Migrationen in diesem Projekt eingesetzt werden.

#2: Der Verlauf der gesamten Migration soll außerdem revisionssicher dokumentiert werden.

Durchführung:
dynaMigs.net begleitet das Projekt auf technischer und administrativer Ebene. Wo IMT nicht einsetzbar ist, kommen geeignete alternative Tools zum Einsatz.

Technischer Scope NAS-Migration:

  • von 350+ Dell VNX-Frames (VNX 5400/5800) zu Dell Unity
  • 2.500+ virtuelle Server
  • 7.000+ Filesysteme
  • 30.000+ Trees
  • 200.000+ NFS-Exports
  • 80.000+ CIFS-Shares
  • 30+ Standorte weltweit
  • Gesamtvolumen: 7+ PB

Administrativer Scope:

  • Steuerung von Offshore-Teams zur Implementation der Migration
  • Anpassungen der Change-Prozesse
  • Changemanagement Richtung Kunden (Terminabsprachen, Begleitung der Changes im CAB)
  • Changekoordination
  • Begleitung der Downtimes (Umschaltkoordination, Second- und Third-Level Support der Implementation Specialists)

Programmiersprachen:

  • python
  • perl
  • Go
  • Rust
  • Visual Basic
  • C/C++
  • C#
  • Powershell
  • bash

Protokolle:

  • CIFS
  • NFS
  • S3

Nationalitäten:
Teams aus Ägypten, Australien, Brasilien, China, Indien, Japan, Rumänien, Südafrika, UK, Ungarn, USA

Specials:

  • Lösungsbau/Lösungsübersetzung
  • Anpassung bestehender Toolsets an Kundenumgebungen
  • Multiprotokoll (NFS/CIFS)
  • DFS / DDFS / Widelinks
  • Mehrere Codepages: ISO-8859-15 / UTF-8 / Unicode
  • Revisionssicherer Migrationsprozess

Projektdauer: drei Jahre