Seminar Trino – Fault-Tolerant Execution und resiliente Abfragen

Das Seminar behandelt die Absicherung langer und ressourcenintensiver Abfragen gegen Worker- und Ausführungsfehler. Retry-Strategien, Exchange Manager, Spooling, Connector-Fähigkeiten, Kapazität, Verschlüsselung, Monitoring und kontrollierte Störungsszenarien werden zu einem belastbaren Resilienzkonzept verbunden.

Inhaltsübersicht

• Lernziele und fachliche Einordnung
• Schrittweise Seminarinhalte
• Praxisübungen und Laborszenarien
• Zielgruppe und Voraussetzungen
• Didaktik und Arbeitsweise

Lernziele

• Technische Fehlerklassen und Grenzen automatischer Wiederholung unterscheiden.
• Query- und Task-Retry anhand des Workload-Profils auswählen.
• Einen Exchange Manager sicher und kapazitätsgerecht konfigurieren.
• Connector-Kompatibilität und Ressourcenfolgen vor Aktivierung prüfen.
• Ausfalltests, Monitoring und Rückfallverfahren dokumentieren.

Schrittweise Seminarinhalte

1. Fehlerklassen und Resilienzziele

Schwerpunkt: Worker-Ausfall, Netzwerkunterbrechung, Exchange-Verlust, Datenquellenfehler, Benutzerfehler, RPO, RTO und Workload-Kritikalität.

1. Ausgangslage, fachliche Ziele, technische Abhängigkeiten und Abnahmekriterien für den Themenblock „Fehlerklassen und Resilienzziele“ erfassen.
2. Relevante Komponenten, Datenobjekte, Rollen und Konfigurationsparameter anhand von Worker-Ausfall, Netzwerkunterbrechung, Exchange-Verlust, Datenquellenfehler, Benutzerfehler, RPO, RTO und Workload-Kritikalität. modellieren.
3. Die erforderliche Konfiguration, SQL-Abfrage oder Prozessfolge im Laborsystem schrittweise umsetzen und jeden Zwischenstand dokumentieren.
4. Funktion, Ausführungsplan, Datenzugriff, Berechtigungen, Ressourcenverbrauch und Fehlerverhalten mit definierten Positiv- und Negativfällen prüfen.
5. Als Arbeitsergebnis eine priorisierte Fehler- und Resilienzanalyse dokumentieren, fachlich abnehmen und in einen wiederholbaren Standard überführen.

2. Retry-Policy und Ausführungsmodell

Schwerpunkt: NONE, QUERY, TASK, Stage-Wiederholung, Zwischenstände, Query-Eigenschaften, Kosten und connectorabhängige Unterstützung.

1. Ausgangslage, fachliche Ziele, technische Abhängigkeiten und Abnahmekriterien für den Themenblock „Retry-Policy und Ausführungsmodell“ erfassen.
2. Relevante Komponenten, Datenobjekte, Rollen und Konfigurationsparameter anhand von NONE, QUERY, TASK, Stage-Wiederholung, Zwischenstände, Query-Eigenschaften, Kosten und connectorabhängige Unterstützung. modellieren.
3. Die erforderliche Konfiguration, SQL-Abfrage oder Prozessfolge im Laborsystem schrittweise umsetzen und jeden Zwischenstand dokumentieren.
4. Funktion, Ausführungsplan, Datenzugriff, Berechtigungen, Ressourcenverbrauch und Fehlerverhalten mit definierten Positiv- und Negativfällen prüfen.
5. Als Arbeitsergebnis eine begründete Retry-Strategie dokumentieren, fachlich abnehmen und in einen wiederholbaren Standard überführen.

3. Exchange Manager und Spooling

Schwerpunkt: Dateisystem- und Object-Storage-Exchange, Verzeichnisse, Credentials, Verschlüsselung, Lebensdauer, Durchsatz und Fehlerverhalten.

1. Ausgangslage, fachliche Ziele, technische Abhängigkeiten und Abnahmekriterien für den Themenblock „Exchange Manager und Spooling“ erfassen.
2. Relevante Komponenten, Datenobjekte, Rollen und Konfigurationsparameter anhand von Dateisystem- und Object-Storage-Exchange, Verzeichnisse, Credentials, Verschlüsselung, Lebensdauer, Durchsatz und Fehlerverhalten. modellieren.
3. Die erforderliche Konfiguration, SQL-Abfrage oder Prozessfolge im Laborsystem schrittweise umsetzen und jeden Zwischenstand dokumentieren.
4. Funktion, Ausführungsplan, Datenzugriff, Berechtigungen, Ressourcenverbrauch und Fehlerverhalten mit definierten Positiv- und Negativfällen prüfen.
5. Als Arbeitsergebnis eine sichere Exchange- und Spooling-Konfiguration dokumentieren, fachlich abnehmen und in einen wiederholbaren Standard überführen.

4. Kapazität, Kompatibilität und Monitoring

Schwerpunkt: Zwischendatenvolumen, Netzwerk, Speicher, Connector-Matrix, Limits, Metriken, Logs, Query-Zustände und Alarmierung.

1. Ausgangslage, fachliche Ziele, technische Abhängigkeiten und Abnahmekriterien für den Themenblock „Kapazität, Kompatibilität und Monitoring“ erfassen.
2. Relevante Komponenten, Datenobjekte, Rollen und Konfigurationsparameter anhand von Zwischendatenvolumen, Netzwerk, Speicher, Connector-Matrix, Limits, Metriken, Logs, Query-Zustände und Alarmierung. modellieren.
3. Die erforderliche Konfiguration, SQL-Abfrage oder Prozessfolge im Laborsystem schrittweise umsetzen und jeden Zwischenstand dokumentieren.
4. Funktion, Ausführungsplan, Datenzugriff, Berechtigungen, Ressourcenverbrauch und Fehlerverhalten mit definierten Positiv- und Negativfällen prüfen.
5. Als Arbeitsergebnis ein messbares Kapazitäts- und Kontrollmodell dokumentieren, fachlich abnehmen und in einen wiederholbaren Standard überführen.

5. Ausfalltest und Betriebsfreigabe

Schwerpunkt: Worker-Abbruch, Netzwerkfehler, Exchange-Störung, Retry-Beobachtung, Ergebnisprüfung, Abbruchkriterien, Rollback und Dokumentation.

1. Ausgangslage, fachliche Ziele, technische Abhängigkeiten und Abnahmekriterien für den Themenblock „Ausfalltest und Betriebsfreigabe“ erfassen.
2. Relevante Komponenten, Datenobjekte, Rollen und Konfigurationsparameter anhand von Worker-Abbruch, Netzwerkfehler, Exchange-Störung, Retry-Beobachtung, Ergebnisprüfung, Abbruchkriterien, Rollback und Dokumentation. modellieren.
3. Die erforderliche Konfiguration, SQL-Abfrage oder Prozessfolge im Laborsystem schrittweise umsetzen und jeden Zwischenstand dokumentieren.
4. Funktion, Ausführungsplan, Datenzugriff, Berechtigungen, Ressourcenverbrauch und Fehlerverhalten mit definierten Positiv- und Negativfällen prüfen.
5. Als Arbeitsergebnis einen praktisch geprüften Resilienz- und Wiederanlaufprozess dokumentieren, fachlich abnehmen und in einen wiederholbaren Standard überführen.

Praxisübungen und Laborszenarien

• Konfiguration einer Task-Retry-Umgebung mit Exchange Manager.
• Simulation eines Worker-Ausfalls während einer laufenden Abfrage.
• Auswertung von Retry-Verhalten, Ressourcenverbrauch und Ergebnisintegrität.

Zielgruppe und Voraussetzungen

Zielgruppe: Trino-Administration, Site Reliability Engineering, Plattformbetrieb, Performance Engineering und technische Architektur.

Voraussetzungen: Trino-Administrationsgrundlagen, Kenntnisse in Object Storage oder gemeinsamem Dateisystem sowie Erfahrung mit Monitoring und verteilten Systemen.

Didaktik und Arbeitsweise

Kurze Fachimpulse werden unmittelbar durch Demonstrationen, strukturierte Konfigurations- oder SQL-Schritte, praktische Übungen und kontrollierte Fehlerfälle vertieft. Jede Übung verwendet definierte Ausgangswerte, Prüfpunkte und Dokumentationsanforderungen, damit die erarbeiteten Abläufe als technischer Standard wiederholbar bleiben.