Databricks – Zugriffe, Datenqualität und Betriebsabläufe kontrollieren

Sie machen eine vorhandene Databricks-Pipeline für ein Team betreibbar. Im Mittelpunkt stehen Datenzuständigkeit, Zugriffsregeln und die verlässliche Erkennung fehlerhafter Ergebnisse. Eine kleine Übergabe zwischen Entwicklungs- und Betriebsrolle zeigt, welche Informationen für Freigabe, Störungsbehandlung und Kostenkontrolle benötigt werden.

Dauer: 2 Tage.

• Datenrechte und Verantwortlichkeiten nachvollziehbar begrenzen.
• Qualitätsfehler mit einem definierten Betriebsablauf behandeln.
• Änderungen und Störungen anhand von Lauf- und Herkunftsdaten bewerten.

• Datenbestände und Verantwortlichkeiten im Unity Catalog strukturieren; Katalog-, Schema- und Objektgrenzen bewusst wählen.
• Benutzer- und Dienstzugriffe mit minimalen Rechten planen; Speicherung und Zugriff auf externe Daten getrennt betrachten.
• Qualitätsregeln für fachliche Vollständigkeit, Schlüssel und erwartete Werte aufstellen; Fehlerbehandlung statt bloßer Warnsammlung festlegen.
• Jobläufe, Abhängigkeiten und Datenherkunft für eine Störungsanalyse zusammenführen; fehlende Beobachtungen sichtbar machen.
• Änderungen an Verarbeitung und Tabellen mit Testdaten, Freigabe und kontrollierter Übernahme organisieren.
• Rechenverbrauch, Wartezeiten und wiederholte Fehler auswerten; Zuständigkeiten für Budget- und Betriebsgrenzen festhalten.

• Lesende und verarbeitende Rollen für einen Datenbereich einrichten und unerlaubte Tabellenzugriffe mit Negativtests nachweisen.
• Eine fehlerhafte Datenlieferung erkennen, aus dem fachlichen Ergebnis heraushalten und nach Korrektur kontrolliert erneut verarbeiten.
• Für einen gescheiterten Job einen Betriebsbericht mit betroffenen Daten, Ursache, Rückweg und Kostenfolgen erstellen.

Databricks-Administratoren, Data Engineers und Verantwortliche für Datenplattformbetrieb und Governance.

Praktische Erfahrung mit Databricks-Jobs und Tabellen; SQL-Kenntnisse und Verständnis von Rollen und Berechtigungen.

Das Labor setzt eine geeignete Databricks-Umgebung mit Unity Catalog voraus. Verfügbare Governance- und Betriebsfunktionen werden anhand der vereinbarten Berechtigungen festgelegt.

Sie erhalten eine Teilnahmebescheinigung von SCN.

Aufbaukurs für Teilnehmende mit praktischer Erfahrung in den genannten Voraussetzungen.

Besprechen Sie Ihre Lernziele vorab mit dem Trainer. Unsere Ansprechpartner unterstützen Sie bei individuellen Themen und Firmenschulungen.

Diese Angebote behandeln ergänzende Schwerpunkte. Wählen Sie nach Ihren Aufgaben und den jeweiligen Voraussetzungen; eine verbindliche Kursreihenfolge ist damit nicht vorgegeben.

• Databricks – Datenpipelines und Lakehouse-Bestände nachvollziehbar aufbauen