XDM

XDM logo

BigQuery

BigQuery ist eine zentrale Plattform für moderne Analytics und Datenprodukte, doch Testdaten werden oft noch mit ad-hoc SQL und fragilen Skripten verwaltet. XDM integriert BigQuery in Ihre unternehmensweite Testdatenstrategie und ermöglicht Klonen, Subsetting und Maskierung über Cloud- und On-Prem-Systeme hinweg. Teams arbeiten mit fachlich orientierten Modellen statt mit Roh-Tabellen, während XDM sichere, konsistente Bereitstellung von BigQuery-Testdaten automatisiert.

Einheitliche Testdaten über BigQuery und relationale Systeme hinweg

Mit dem Entity- und Domain-Modeling von XDM beschreiben Sie Geschäftsobjekte wie Kunden, Verträge oder Bestellungen einmal und verknüpfen ihre technische Repräsentation in BigQuery und anderen Datenbanken. Beziehungen zwischen Entitäten können systemübergreifend sein, sodass Datenschnitte für einen Test konsistent über Cloud- und On-Prem-Quellen hinweg zusammengestellt werden. Row-Level-Processing nutzt diese Beziehungen zur Laufzeit, um alle abhängigen Datensätze zu bestimmen und exakt die benötigten Daten zu bewegen, nicht mehr und nicht weniger. Dieses einheitliche Modell macht BigQuery zu einem First-Class Citizen in End-to-End-Integrations-, Regressions- und Performance-Tests.

Einheitliche Testdaten über BigQuery und relationale Systeme hinweg

Konsistente Maskierung und synthetische Daten für BigQuery

Mit XDMs Modifikations-Engine werden sensible Daten bei der Übertragung zwischen BigQuery und anderen Systemen anonymisiert oder pseudonymisiert, stets nach denselben zentralen Regeln. Deterministische Maskierung sorgt dafür, dass identische Eingaben in konsistente Ausgaben über Tabellen, Projekte und Plattformen hinweg transformiert werden und referenzielle Integrität erhalten bleibt, bei GDPR-Konformität. Bestehende BigQuery-Tabellen können als Lookup-Quellen für realistische Werte dienen, und dieselben Mechanismen lassen sich für die Generierung synthetischer Testdaten im großen Maßstab nutzen. So lassen sich realistische Analytics- und ML-Tests in BigQuery durchführen, ohne Produktionsidentitäten offenzulegen oder Compliance zu verletzen.

Konsistente Maskierung und synthetische Daten für BigQuery

Automatisierung, Workflows und Integration in die Toolchain

XDM-Workflows orchestrieren alle Schritte rund um BigQuery-Testdaten: Validierung von Eingabeparametern, Extraktion und Laden, Maskierung, Bereinigung früherer Läufe und Benachrichtigungen. Diese Workflows lassen sich über die öffentliche REST-API aus CI/CD-Pipelines, Schedulern oder Testautomation anstoßen, sodass BigQuery-Testdatenbereitstellung zu einem automatisierten Schritt im Delivery-Prozess wird. Hooks ermöglichen individuelles Pre- und Post-Processing, etwa zum Invalidieren von Caches, Starten nachgelagerter Jobs oder Aufrufen externer Services, sobald Daten verfügbar sind. Alle Ausführungen werden zentral protokolliert und berichtet, sodass jederzeit Transparenz über Datenbewegungen und Prozesse besteht.

Automatisierung, Workflows und Integration in die Toolchain

Self-Service-Testdatenbestellung für BigQuery-Nutzer

Über die Data Shop können auch nicht-technische Nutzer BigQuery-Testdaten in ihrer fachlichen Sprache anfordern, etwa nach Produkten, Kundengruppen oder Zeiträumen statt nach Datasets und Partitionen. Hinter jeder Bestellung kümmert sich ein XDM-Workflow um alle technischen Details, einschließlich systemübergreifender Selektion, Maskierung und Import in das gewünschte BigQuery-Projekt oder Test-Dataset. Freigabeschritte, Ausführungsfenster und Zeitplanung lassen sich so konfigurieren, dass rechenintensive BigQuery-Jobs zu geeigneten Zeiten laufen, ohne Produktions-Workloads zu beeinträchtigen. Diese Kombination aus Self-Service, Governance und Automatisierung ermöglicht eine sichere und effiziente Nutzung von BigQuery als zentrale Analytics-Plattform für Tests und Qualitätssicherung.

Self-Service-Testdatenbestellung für BigQuery-Nutzer

Mehr erfahren

Testdatenmanagement

XDM ist eine umfassende Plattform für Testdatenmanagement, die agile Teamarbeit verbessert, Testdaten-Workflows automatisiert und mehrere Datenbanken mit sicherer Maskierung unterstützt.

Maskiere sensible Daten

Maskieren Sie sensible Daten mit dem XDM Masking Tool. Einhaltung des Datenschutzes durch fortschrittliche Datenmaskierung für alle Umgebungen.

White paper

Data Masking with XDM

Lösung:
XDM

XDM logo

Optimiere dein Testdaten-management mit XDM