TDM-Software für sichere realistische Datensätze für direkte Verwendung innerhalb einer Cloud CI/CD Pipeline ❗

Wir bieten vier Methoden zur Erzeugung sicherer, intelligenter Testdaten in referenziell korrekten Datenbank-, Flat-File-, halbstrukturierten Datei-, formatierten Berichts- und sogar unstrukturierten Dateizielen: 1. Maskierung von Produktionsdaten 2. RDBMS-Tabellen-Subsetting & Spaltenmaskierung 3. Synthese strukturierter Daten (Zufallsgenerierung/-auswahl) 4. Jede beliebige Kombination der oben genannten Funktionen

Was wird hier demonstriert? Dies ist die dritte Ergänzung zur DevOps-Pipeline-Serie, hier finden Sie die Links zu den DevOps-Artikeln zu GitLab und AWS CodePipeline.

In diesem Artikel zeigen wir, wie man die IRI Voracity TDM-Plattformsoftware innerhalb einer Azure DevOps-Pipeline verwendet, um realistische Testdaten in verschiedenen Quellen für CI/CD-Zwecke zu erzeugen und zu verwenden. Konkret führen wir IRI RowGen-Skripte aus, um Testdaten in einer Excel-Tabelle zu synthetisieren, und die DarkShield-Files-API, um PII aus einer CosmosDB NoSQL-Datenbank zu maskieren.

Wir bieten vier Methoden zur Erzeugung sicherer, intelligenter Testdaten in referenziell korrekten Datenbank-, Flat-File-, halbstrukturierten Datei-, formatierten Berichts- und sogar unstrukturierten Dateizielen:

Maskierung von Produktionsdaten in IRI FieldShield, CellShield EE oder DarkShield

RDBMS-Tabellen-Subsetting & Spaltenmaskierung in FieldShield

Synthese strukturierter Daten (Zufallsgenerierung/-auswahl) in IRI RowGen

Jede beliebige Kombination der oben genannten Funktionen in IRI Voracity (einschließlich aller Funktionen)

Über Azure Pipelines: Azure Pipelines ist eine Reihe von automatisierten Prozessen zum Erstellen, Testen und Bereitstellen von Projekten. Die Automatisierung dieser Prozesse soll die kontinuierliche Integration, die kontinuierliche Bereitstellung und die kontinuierlichen Tests der DevOps-Methoden unterstützen. Kontinuierliches Testen ist ein Konzept in DevOps, das das Testen von Software in jeder Phase des Lebenszyklus der Softwareentwicklung unterstützt.

Testdatenverwaltung und DevOps: TDM ist der Prozess, bei dem produktionsähnliche Testdaten generiert und verschiedenen Tests zur Verfügung gestellt werden, damit der Testprozess Zugang zu realistischen Daten hat. Eine effektive TDM-Strategie ist aus mehreren Gründen von Vorteil.

Zum einen führen unrealistische Testdaten nicht zu mehr Vertrauen in eine Anwendung, sondern können zu unfruchtbaren Tests führen. Daher ist eine produktionsähnliche Testumgebung mit produktionsähnlichen Testdaten notwendig, um genau zu beurteilen, wie sich eine Anwendung in der Produktion verhalten wird.

Zweitens soll TDM die Verfügbarkeit von Testdaten garantieren, wenn sie während der Tests benötigt werden. Gute Testdaten bringen keinen Nutzen, wenn sie zum Zeitpunkt der Testdurchführung nicht verfügbar sind.

Tests in DevOps und die Rolle von Testdaten: Testdatenmanagement sollte implementiert werden, um verschiedene Tests mit realistischen, qualitativ hochwertigen Daten während des gesamten DevOps-Prozesses zu unterstützen.

Weltweite Referenzen: Seit über 40 Jahren nutzen unsere Kunden wie die NASA, American Airlines, Walt Disney, Comcast, Universal Music, Reuters, das Kraftfahrtbundesamt, das Bundeskriminalamt, die Bundesagentur für Arbeit, Rolex, Commerzbank, Lufthansa, Mercedes Benz, Osram,.. aktiv unsere Software für Big Data Wrangling und Schutz! Sie finden viele unserer weltweiten Referenzen hier und eine Auswahl deutscher Referenzen hier.

Partnerschaft mit IRI: Seit 1993 besteht unsere Kooperation mit IRI (Innovative Routines International Inc.) aus Florida, USA. Damit haben wir unser Portfolio um die Produkte CoSort, Voracity, DarkShield, FieldShield, RowGen, NextForm, FACT und CellShield erweitert. Nur die JET-Software GmbH besitzt die deutschen Vertriebsrechte für diese Produkte. Weitere Details zu unserem Partner IRI Inc. hier.

• • 
    Wir bieten vier Methoden zur Erzeugung sicherer, intelligenter Testdaten in referenziell korrekten Datenbank-, Flat-File-, halbstrukturierten Datei-, formatierten Berichts- und sogar unstrukturierten Dateizielen: 1. Maskierung von Produktionsdaten 2. RDBMS-Tabellen-Subsetting & Spaltenmaskierung 3. Synthese strukturierter Daten (Zufallsgenerierung/-auswahl) 4. Jede beliebige Kombination der oben genannten Funktionen
• • 
    In diesem Artikel wird gezeigt, wie die Ausführung von IRI DarkShield-Datenmaskierungsaufträgen aus SSH-Befehlen automatisiert werden kann, die innerhalb der AWS CodePipeline ausgeführt werden, um zweckmäßige Testdaten im DevOps-Prozess zu erzeugen.
• • 
    Zweckmäßige, eigenständige IRI-Softwareprodukte - namentlich IRI FieldShield zum Suchen und Maskieren und IRI RowGen zum Subsetting oder Synthetisieren strukturierter Daten von Grund auf - erzeugen sichere, realistische und referenziell korrekte Testdaten. IRI DarkShield kann sensible Daten in semi- und unstrukturierten Quellen finden und maskieren.
• • 
    Testdatenmanagement-Marktprognose bis 2027: Führende Testdaten-Lösungen für DevOps, DB, DV und ETL-Prototypen!

Weiterführende Links

• Originalmeldung von JET-Software GmbH
• Alle Meldungen von JET-Software GmbH
• End-2-End Datenmanagement mit IRI Voracity: BloorResearch Testdatamanagement-Marktstudie 2021
• [PDF] RowGen erstellt und füllt automatisch massive DB-, Datei- und Berichtziele mit strukturell und referentiell korrekten Testdaten - in Minuten, nicht Stunden!
• [PDF] IRI FieldShield® ist eine leistungsstarke und kostengünstige Software zur Datenerkennung und -maskierung für PII in strukturierten und semistrukturierten Quellen, groß und klein. Die FieldShield-Dienstprogramme in Eclipse dienen zur Profilierung und De-Identifizierung von Daten im Ruhezustand (statische Datenmaskierung) und das FieldShield SDK wird zur Sicherung von Daten in Bewegung (dynamische Datenmaskierung) verwendet.
• Schnellere Datenmastering-Lösungen: Voracity ist die einzige leistungsstarke All-in-One-Datenmanagement-Plattform. Kontrollieren Sie Ihre Daten in jeder Phase des Lebenszyklus und ziehen Sie den maximalen Wert daraus!
• DarkShield findet und maskiert sensible Informationen in mehreren unstrukturierten DB- und Dateiformaten in mehreren Silos gleichzeitig!
• Verwenden Sie zweckmäßige IRI-Datenschutzprodukte oder die umfassende IRI Voracity-Plattform, um sensible Daten zu finden und zu maskieren - egal in welcher Form und wo sie sich befinden - und um zu beweisen, dass Sie sie geschützt haben.