Dieses Seminar behandelt den Aufbau robuster Ingestion-Strecken nach Apache Paimon. Im Mittelpunkt stehen Änderungsdaten, Table-Synchronisation, Migrationspfade aus Quellsystemen und die saubere Behandlung von Schemaänderungen. Das Seminar richtet sich an Teams, die aus Datenbanken, Kafka-Themen oder anderen Ereignisquellen verlässlich in Paimon schreiben und dabei keine bösen Überraschungen bei Typen, Schlüsseln oder Tabellenentwicklung erleben wollen.
Seminarziele
Nach dem Seminar ist klar, wie CDC- und Ingestion-Strecken fachlich und technisch aufgebaut werden, wann Table-Sync- oder Database-Sync-Muster sinnvoll sind und wie Tabellenmodell, Schlüsselwahl, berechnete Spalten und Partitionslogik zusammenspielen. Behandelt werden auch typische Fehlerbilder bei Schema Drift, Dubletten, Quellwechseln und Migrationsschnitten.
Zielgruppe
Geeignet für Data Engineers, Integrationsentwickler, Plattformteams und Migrationsteams, die Apache Paimon als Zielsystem für Änderungsdaten und operative Datenpipelines nutzen wollen.
Voraussetzungen
Vorausgesetzt werden sichere SQL-Grundlagen sowie ein grundlegendes Verständnis von Streaming, CDC und Apache Flink oder vergleichbaren Datenpipelines.
Schwerpunkte
- Grundlagen von CDC, Event-Formaten und Synchronisationsmustern
- Table Sync und Database Sync für operative Ingestion-Szenarien
- Einbindung typischer Quellsysteme und Ereignisströme
- Schlüssel, Partitionen, berechnete Spalten und Typabbildungen
- Schema Evolution in laufenden Pipelines
- Fehlerbehandlung, Validierung, Wiederanlauf und kontrollierte Umschaltungen
- Migrationspfade aus bestehenden Landing- und Lake-Strukturen
Praxis
Im Labor werden Ingestion-Strecken aufgebaut, Tabellen automatisch angelegt und Änderungen bis in das Lakehouse nachverfolgt. Dabei werden bewusst auch problematische Fälle wie geänderte Schemas, abweichende Typen und unvollständige Schlüsselinformationen betrachtet, weil genau dort Projekte normalerweise aus der Kurve fliegen.
Fachbereichsleiter / Leiter der Trainer / Ihre Ansprechpartner
-
Lucas Beich
Telefon: + 49 (221) 74740055
E-Mail: lucas.beich@seminar-experts.de -
Paul Goldschmidt
Telefon: + 49 (221) 74740055
E-Mail: paul.goldschmidt@seminar-experts.de
Seminardetails
| Dauer: | 2 Tage ca. 6 h/Tag, Beginn 1. Tag: 10:00 Uhr, 2. Tag: 09:00 Uhr |
| Preis: |
Öffentlich oder Live Stream: € 1.198 zzgl. MwSt. Inhaus: € 3.400 zzgl. MwSt. |
| Teilnehmeranzahl: | min. 2 - max. 8 |
| Teilnehmer: | Data Engineers, Integrationsentwickler, Plattformteams, Migrationsteams |
| Voraussetzungen: | Sichere SQL-Grundlagen sowie Grundverständnis von Streaming, CDC und Apache Flink oder vergleichbaren Pipelines |
| Standorte: | Stream Live, Inhaus/Firmenseminar, Berlin, Bremen, Darmstadt, Dresden, Erfurt, Essen, Flensburg, Frankfurt, Freiburg, Friedrichshafen, Hamburg, Hamm, Hannover, Jena, Kassel, Köln, Konstanz, Leipzig, Luxemburg, Magdeburg, Mainz, München, Münster, Nürnberg, Paderborn, Potsdam, Regensburg, Rostock, Stuttgart, Trier, Ulm, Wuppertal, Würzburg |
| Methoden: | Vortrag, Demonstrationen, praktische Übungen am System, gemeinsame Analyse typischer Architektur- und Betriebsfälle |
| Seminararten: | Öffentlich, Webinar, Inhaus, Workshop - Alle Seminare mit Trainer vor Ort, Webinar nur wenn ausdrücklich gewünscht |
| Durchführungsgarantie: | ja, ab 2 Teilnehmern |
| Sprache: | Deutsch - bei Firmenseminaren ist auch Englisch möglich |
| Seminarunterlage: | Dokumentation auf Datenträger oder als Download |
| Teilnahmezertifikat: | ja, selbstverständlich |
| Verpflegung: | Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) |
| Support: | 3 Anrufe im Seminarpreis enthalten |
| Barrierefreier Zugang: | an den meisten Standorten verfügbar |
| Weitere Informationen unter + 49 (221) 74740055 |
Seminartermine
Die Ergebnissliste kann durch Anklicken der Überschrift neu sortiert werden.
