germanyuksettings
Alle Datenmanagement Schulungen

Schulung Data Engineering: Aufbau von Datenpipelines und ETL-Prozessen

 Effizienter Aufbau von Datenpipelines und ETL-Prozessen für eine robuste Dateninfrastruktur

2 Tage / S3491
4 Teilnehmende bisher

Schulungsformen

Offene Schulung


Inhouse-/Firmenschulung

  • 2 Tage - anpassbar
  • Termin nach Wunsch
  • Preis nach Angebot
  • In Ihrem Hause oder bei der GFU

Individualschulung

  • 2 Tage - anpassbar
  • Termin nach Wunsch
  • Preis nach Angebot
  • In Ihrem Hause oder bei der GFU

Beschreibung

Dieses Seminar bietet einen kompakten Überblick über die Grundlagen des Data Engineerings. Es beleuchtet zentrale Themen wie Datenintegration, ETL-Prozesse (Extraktion, Transformation, Laden) und Datenpipelines. Teilnehmer erhalten Einblick in verschiedene Datenmodelle und Datenbankarten, einschließlich relationaler und NoSQL-Systeme. Zudem werden praktische Fertigkeiten im Umgang mit relationalen Datenbanken und ETL-Tools vermittelt. Das Seminar behandelt auch fortgeschrittene Konzepte wie Datenpipeline-Architektur, Cloud-basierte Lösungen, Automatisierung, sowie Datenqualität und -sicherheit. Es richtet sich an Fachkräfte, die ihre Kenntnisse im Data Engineering vertiefen möchten.

Unser vielseitiges Angebot an Datenmanagement Kurse

Schulungsziel

Im Verlauf dieses Seminars erwerben die Teilnehmer Kenntnisse über den Design- und Implementierungsprozess von Datenpipelines und ETL-Prozessen. Sie lernen, wie Daten aus diversen Quellen extrahiert, gemäß bestimmter Geschäftsregeln transformiert und schließlich in Zielsysteme geladen werden. Zudem werden sie mit den typischen Herausforderungen bei der Datenintegration und den entsprechenden Lösungsansätzen konfrontiert. Durch eine Mischung aus theoretischer Unterweisung und praxisorientierten Übungen werden die Fähigkeiten der Teilnehmer gestärkt, um Datenpipelines effektiv zu konzipieren und umzusetzen.

Details

Wer teilnehmen sollte

Am Seminar über den Aufbau von Datenpipelines und ETL-Prozessen sollten vor allem die folgenden Personen oder Rollen aus einem Unternehmen teilnehmen:

  • Dateningenieure : Sie sind häufig die Hauptverantwortlichen für die Gestaltung und Implementierung von Datenpipelines und würden daher direkt von den im Seminar vermittelten Fähigkeiten profitieren.
  • Datenanalysten : Obwohl sie sich hauptsächlich auf die Analyse von Daten konzentrieren, können Datenanalysten durch das Verständnis des ETL-Prozesses bessere Einblicke in die Herkunft und Qualität der Daten erhalten.
  • Business Intelligence (BI) Fachleute : Personen, die Dashboards und Berichte erstellen, sollten wissen, wie Daten verarbeitet und in Data Warehouses oder Datenlaken geladen werden.
  • Datenbankadministratoren (DBAs) : Ein Verständnis dafür, wie Daten extrahiert, transformiert und geladen werden, kann für DBAs nützlich sein, um die Performance und Integrität von Datenbanken sicherzustellen.
  • Projektmanager und Produktmanager : Sie müssen oft verschiedene Technikteams koordinieren und könnten von einem tieferen Verständnis der Datenintegrationsprojekte profitieren.

Ihre Schulung


Präsenz-Schulung

Online-Schulung
Lernmethode

Ausgewogene Mischung aus Theorie und Praxis

Wie auch bei unseren Präsenz-Seminaren: Ausgewogene Mischung aus Theorie und praktischen Übungen. Trainer durchgehend präsent.

Unterlagen

Seminarunterlagen oder Fachbuch zum Seminar inklusive, das man nach Rücksprache mit dem Trainer individuell auswählen kann.

Seminarunterlagen oder Fachbuch inklusive (per Post). Das Fachbuch wählt der Trainer passend zum Seminar aus - Ihren individuellen Buch-Wunsch berücksichtigen wir auf Nachfrage gerne.

Arbeitsplatz
PC/VMs für jeden Teilnehmenden
Hochwertige und performante Hardware
Große, höhenverstellbare Bildschirme
Zugang zu Ihrem Firmennetz erlaubt
  • Online Meeting + Remote Zugriff auf persönlichen GFU-Schulungs-PC
  • Keine Installation auf dem eigenen PC notwendig
Lernumgebung

Neu aufgesetzte Systeme für jeden Kurs in Abstimmung mit dem Seminarleiter.

Arbeitsmaterialien

DIN A4 Block, Notizblock, Kugelschreiber, USB-Stick, Textmarker, Post-its

Teilnahmezertifikat

Die Teilnahmezertifikat inkl. Inhaltsverzeichnis wird Ihnen am Ende des Seminars ausgehändigt.

Die Teilnahmezertifikat inkl. Inhaltsverzeichnis wird Ihnen per Post zugesandt.


Präsenz-Schulung

Online-Schulung
Teilnehmendenzahl

min. 1, max. 8 Personen

Garantierte Durchführung

Ab 1 Teilnehmenden*

Schulungszeiten
2 Tage, 09:00 - 16:00 Uhr
Ort der Schulung
GFU Schulungszentrum oder Virtual Classroom
GFU Schulungszentrum
Am Grauen Stein 27
51105 Köln-Deutz

oder online im Virtual Classroom oder europaweit bei Ihnen als Inhouse-Schulung

Um ein optimales Raumklima zu gewährleisten, haben wir das Schulungszentrum mit 17 hochmodernen Trotec TAC V+ Luftreinigern ausgestattet. Diese innovative Filtertechnologie (H14 zertifiziert nach DIN EN1822) sorgt dafür, dass die Raumluft mehrfach pro Stunde umgewälzt wird und Schadstoffe zu 99.995% im HEPA-Filter abgeschieden und infektiöse Aerosole abgetötet werden.

Zusätzlich sind alle Räume mit CO2-Ampeln ausgestattet, um jederzeit eine hervorragende Luftqualität sicherzustellen.

Räumlichkeiten

Helle und modern ausgestattete Räume mit perfekter Infrastruktur

Bequem aus dem Homeoffice von überall

Preisvorteil

Dritter Mitarbeitende nimmt kostenfrei teil.

Eventuell anfallende Prüfungskosten für den dritten Teilnehmenden werden zusätzlich berechnet.

Hinweis: Um den Erfolg der Schulung zu gewährleisten, sollte auch der dritte Teilnehmende die erwarteten Vorkenntnisse mitbringen.

All-Inclusive

Gebäck, Snacks und Getränke ganztägig, Mittagessen im eigenen Restaurant, täglich 6 Menüs, auch vegetarisch

Eine Auswahl unserer Frühstücks-Snacks und Nervennahrungs-Highlights senden wir Ihnen mit den Seminarunterlagen per Post zu.

Barrierefreiheit

Das GFU-Schulungszentrum (Am Grauen Stein 27) ist barrierefrei

-
Rechnungsstellung

Erst nach dem erfolgreichen Seminar. Keine Vorkasse.

Stornierung

Kostenfrei bis zum Vortag des Seminars

Vormerken statt buchen

Sichern Sie sich unverbindlich Ihren Seminarplatz schon vor der Buchung - auch wenn Sie selbst nicht berechtigt sind zu buchen


Präsenz-Schulung

Online-Schulung
  • Eigener Shuttle-Service
  • Reservierte Parkplätze
  • Hotelreservierung
  • Technik-Sofort-Support

Inhalt

  • Ziele und Erwartungen der Teilnehmenden
    • Klärung individueller Lernziele und Erwartungen, um das Seminar so praxisnah und relevant wie möglich zu gestalten
  • Grundlagen
    • Was ist Data Engineering?
    • Unterschied zwischen Datenintegration, Datenpipelines und ETL-Prozessen
    • Wichtige Begriffe und Konzepte
  • Überblick über ETL-Prozesse
    • Was bedeutet ETL (Extraktion, Transformation, Laden)?
    • Wann und warum werden ETL-Prozesse benötigt?
  • Datenmodelle und Datenbanken
    • Einführung in relationationale Datenbanken
    • NoSQL Datenbanken und deren Relevanz im Data Engineering
    • Datenmodellierung: Star-Schema, Snowflake-Schema, Denormalisierung
  • Praktische Übung : Erste Schritte mit einer relationalen Datenbank (z.B. PostgreSQL)
  • Extraktion von Daten
    • Datenquellen und ihre Typen
    • Tools und Techniken für die Datenextraktion
  • Transformation von Daten
    • Bedeutung und Notwendigkeit der Datentransformation
    • Typen von Transformationen
    • Best Practices
  • ETL-Tools im Überblick
    • Traditionelle ETL-Tools (z.B. Talend, Informatica)
    • Open-Source-ETL-Tools (z.B. Apache NiFi, Apache Airflow)
  •  Datenpipeline-Architektur
    • Design-Prinzipien für skalierbare Pipelines
    • Batch- vs. Echtzeitverarbeitung
    • Best Practices für Fehlerbehandlung
    • Leistungsoptimierungstechniken
  •  Cloud-basierte Datenpipelines
    • Vor- und Nachteile des Cloud-Computings
    • Übersicht über Cloud-Anbieter: AWS, Google Cloud, Azure
    • Migrationsstrategien: On-Premise zu Cloud
    • Sicherheitsaspekte in der Cloud
  •  Automatisierung und Orchestrierung
    • Bedeutung der Automatisierung im Daten-Engineering
    • Einführung in Orchestrierungstools: Apache Airflow, Prefect
    • Automatisierungs-Workflow-Design
    • Best Practices und Fallstricke
  •  Datenpipelines für Advanced Analytics und ML
    • Unterschied zwischen traditionellen Pipelines und ML-Pipelines
    • Einführung in Feature Engineering
    • ML-Model-Deployment und Inferenz-Pipelines
    • Monitoring und Versionierung von ML-Modellen
  •  Datenqualität und -bereinigung
    • Wichtigkeit der Datenqualität
    • Tools und Techniken zur Datenbereinigung
    • Datenvalidierung und -überprüfung
    • Fallstudien: Datenqualitätsprobleme und ihre Lösungen
  •  Sicherheit in Datenpipelines
    • Grundlagen der Datensicherheit
    • Datenverschlüsselung und Maskierung
    • Zugriffskontrolle und Authentifizierung
    • Sicherheitsbedrohungen und ihre Abwehr
  •  Daten-Governance und Compliance
    • Was ist Daten-Governance?
    • Rolle des Data Stewards
    • Datenschutz-Grundverordnung (DSGVO) und andere Vorschriften
    • Implementierung von Compliance-Maßnahmen
  •  Monitoring und Fehlerbehandlung
    • Überwachungstools und -strategien
    • Fehlererkennung und -behebung
    • Alarmierung und Benachrichtigungssysteme
    • Rückverfolgbarkeit und Audit-Trails
Praktische Übung : Extraktion und Transformation von Daten mit einem ausgewählten ETL-Tool

Buchungsmöglichkeiten

Online oder in Präsenz teilnehmen

Sie können sowohl Online als auch in Präsenz am Seminar teilnehmen. Klicken Sie bei Ihrer Buchung oder Anfrage einfach die entsprechende Option an.

Gesicherte offene Termine

Weiterbildung Data Engineering: Aufbau von Datenpipelines und ETL-Prozessen

TerminOrtPreis
27.03.-28.03.2025
Plätze vorhanden
Köln / Online 1.370,00
Köln / Online 1.370,00 Buchen Vormerken
22.05.-23.05.2025
Plätze vorhanden
Köln / Online 1.370,00
Köln / Online 1.370,00 Buchen Vormerken
  • Buchen ohne Risiko
  • Keine Vorkasse
  • Kostenfreies Storno bis zum Vortag des Seminars
  • Rechnung nach erfolgreichem Seminar
  • All-Inclusive-Preis
  • Garantierter Termin und Veranstaltungsort
  • Preise pro Person zzgl. Mehrwertsteuer
  • Dritter Mitarbeitende kostenfrei
Inhouse-/Firmenschulung

Inhalte werden auf Wunsch an die Anforderungen Ihres Teams angepasst.

Individualschulung

Fokus aufs Fachliche und maximaler Raum für individuelle Fragen.

Nachbetreuung

Unterstützung nach der Schulung durch
individuelle Nachbetreuung

Details & Anfrage

So haben GFU-Kunden gestimmt

Über das Seminar
4/5

Zwischen durch war der rote Faden nicht erkennbar.


Über die GFU
4/5
Name auf Wunsch anonymisiert
Über das Seminar
5/5

Das Seminar ist genau auf das eingegangen was ich brauchte. Es gab einige Unterlagen, die zusätzlich noch unterstützen das Wissen zu vertiefen. Auch nach der Schulung wurde sich noch Zeit genommen Fragen zu beantworten oder tiefer Wissen aufzubauen. Das war sehr freundlich :) . Sehr gutes Wissen und jede Frage konnte beantwortet werden, egal wie doof sie war.

Aus methodischer Sicht könnte man vllt. die einen oder anderen Bilder, die gezeichnet werden, schon mal im "Ärmel" haben, dann müsste der Trainier sie nicht immer neu malen (aber vllt ist das auch gar nicht möglich)


Über die GFU
5/5

Ich komme seit 2017 zur GFU und bin fast jeden Jahr in einer Schulung... :-) Weil ihr einfach super seid :-) Buchungsprozess ist einfach, gibt immer schöne Pakete und jeder Schulungsleiter war bisweilen freundlich. Dürfte jetzt schon meine 6 oder 7 Schulung bei der GFU gewesen sein.

William Julien Felsch von REWE digital GmbH aus Köln
Über das Seminar
5/5

Super auf den einzelnen eingegangen. . Sehr kompetentes und fundiertes Wissen in allen Bereichen die besprochen wurden


Über die GFU
5/5

Leider das Buch nicht erhalten

Name auf Wunsch anonymisiert
FAQ für Offene Schulungen
  • Alle folgenden Schulungsformen können auch Online als Virtual Classroom durchgeführt werden.
  • Eine Offene Schulung findet zu einem festgelegten Zeitpunkt im voll ausgestatteten Schulungszentrum oder Online/Remote statt. Sie treffen auf Teilnehmende anderer Unternehmen und profitieren vom direkten Wissensaustausch.
  • Eine Inhouse-/Firmen-Schulung geht auf die individuellen Bedürfnisse Ihres Unternehmens ein. Sie erhalten eine kostenfreie Beratung von Ihrem Seminarleiter und können Inhalte und Dauer auf Ihren Schulungsbedarf anpassen. Inhouse-Schulungen können Europaweit durchgeführt werden.
  • Bei einer Individual-Schulung erhalten Sie eine 1-zu-1 Betreuung und bestimmen Inhalt, Zeit und Lerntempo. Der Dozent passt sich Ihren Wünschen und Bedürfnissen an.

Sie können unsere Schulungen auch als Remote Schulung im Virtual Classroom anfragen.

In drei Schritten zum Online Seminar im Virtual Classroom:

  1. Seminar auswählen und auf "Buchen" klicken
  2. Wählen Sie bei "Wie möchten Sie teilnehmen?" einfach "Online" aus.
  3. Formular ausfüllen und über den Button "Jetzt buchen" absenden.

Unser Kundenservice meldet sich bei Ihnen mit der Buchungsbestätigung.

Unsere Online Schulungen finden im Virtual Classroom statt. Ein Virtual Classroom bündelt mehrere Werkzeuge, wie Audio-Konferenz, Text-Chat, Interaktives Whiteboard, oder Application Sharing.

Vorteile von Virtual Classroom:

  • Sie erhalten 1 zu 1 die gleiche Lernumgebung, die Sie auch vor Ort bei uns vorfinden
  • Die technische Vorbereitung wird von den GFU-Technikern vorgenommen
  • Sie erhalten remote Zugriff auf Ihren persönlichen Schulungs-PC im GFU-Seminarraum
  • Die Virtual Classroom Lösung lässt sich auch im Browser betreiben
  • Die GFU-Technik leistet wie gewohnt Soforthilfe bei Problemen
  • Die Schulungsunterlagen bekommen Sie per Post zugeschickt
  • Sie sparen Reisekosten und Zeit
  • 27. Mär. - 28. Mär. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
  • 22. Mai - 23. Mai ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
  • Auch als Inhouse-Schulung, bundesweit mit Termin nach Wunsch und individuellen Inhalten
  • Buchen ohne Risiko! Kostenfreie Stornierung bis zum Vortag des Seminars
Das GFU-Sorglos-Paket

Buchen Sie diese kostenfreien Serviceleistungen für Präsenzseminare ganz einfach während des Buchungsprozesses dazu!

Shuttle Service
Shuttle Service

Machen Sie sich keinen Kopf um die Anreise! Unser Shuttle fährt Sie. Oder Sie parken einfach auf einem extra für Sie reservierten Parkplatz.

Hotelreservierung
Hotelreservierung

Hotelzimmer gesucht? Wir organisieren Ihnen eins. Ihr Vorteil: Sie sparen Zeit und Geld!

Verpflegung
Verpflegung

Gesund oder lecker? Warum nicht beides? Freuen Sie sich auf unsere kulinarische Verpflegung!

Parkplätze
Parkplätze

Parkplätze sind in ausreichender Zahl vorhanden. Reisen Sie mit dem Auto an, reservieren wir Ihnen einen Parkplatz.

137.484
TEILNEHMENDE
3.129
SEMINARTHEMEN
33.888
DURCHGEFÜHRTE SEMINARE
aegallianzaxabayerElement 1boschdeutsche-bankdeutsche-postdouglasfordfujitsuhenkelhermeslufthansamercedesnokiasonytelekomvwzdf