Data Platform Engineer & Airflow-Experte
Self-Service-Datenplattformen, auf denen andere Teams sicher aufbauen.
Routine statt Risiko. Mit über 15 Jahren Erfahrung in der Softwareentwicklung baue ich Datenplattformen mit Apache Airflow, dbt und Amazon Redshift oder Athena auf AWS — DSGVO-konform, automatisiert und so gebaut, dass Ihr Team sie selbst betreiben kann.
Leistungen
Datenplattformen, die im Alltag funktionieren
Apache Airflow: Einführung & Migration
Einführung von Airflow als zentrales Orchestrierungstool, Ablösung selbstgebauter ETL-Lösungen und Migration auf Airflow 3 — mit klaren DAG-Standards, Monitoring und CI/CD.
Self-Service-Datenplattformen
Datenplattformen auf Basis von Amazon Athena, Glue und S3 mit dbt und Spark, auf denen Fachteams Daten eigenständig modellieren, analysieren und in Superset visualisieren — bei Bedarf auch mit Databricks.
Data Warehouse & Customer Data Platform
Aufbau von Data Warehouses und Customer Data Platforms auf Basis von Amazon Redshift — inklusive Anbindung von Quellen wie Salesforce oder Adobe Marketing Cloud.
Privacy Engineering & DSGVO
Datenschutz als Teil der Plattform statt als nachträgliche Prüfung: Betroffenenanfragen automatisiert umsetzen, Zugriffe sauber trennen und Data Governance etablieren — mit Blick auf DSGVO und EU AI Act.
KI & RAG auf Unternehmensdaten
Interne Chatbots und RAG-Anwendungen mit LangChain auf Basis Ihrer Unternehmensdaten — mit mandantenfähiger Zugriffskontrolle, damit Nutzer nur sehen, was sie sehen dürfen.
Cloud-Infrastruktur & IaC
Reproduzierbare Infrastruktur für Datenplattformen auf AWS mit Terraform, Kubernetes (EKS) und Docker — versioniert, automatisiert und gefahrlos änderbar.
Vorgehen
So arbeiten wir zusammen
Analyse
Ich verschaffe mir einen Überblick über Ihre bestehenden Datenflüsse, Tools und Anforderungen und zeige auf, wo die größten Hebel liegen.
Aufbau im Team
Ich arbeite direkt in Ihrem Team mit — von der Architektur bis zum produktiven Code, in kleinen, überprüfbaren Schritten.
Übergabe & Enablement
Dokumentation, Standards und Wissenstransfer, damit Ihr Team die Plattform eigenständig betreiben und weiterentwickeln kann.
Technologie
Ein bewährter Technologie-Stack
- Apache Airflow
- Python
- SQL
- AWS
- Amazon Redshift
- Amazon Athena
- dbt
- Spark
- Kubernetes
- Terraform
- Docker
- Superset
- Databricks
- Scala
- Java
- FastAPI
Bauen wir gemeinsam etwas Beständiges.
Ob Airflow-Einführung, neue Self-Service-Plattform oder Umzug in die Cloud — sprechen wir darüber, was Ihr Team braucht.
Kontakt aufnehmen