Data Engineer (AWS, Spark)

Für einen unserer Kunden suchen wir eine erfahrene Persönlichkeit im Bereich Data Engineering mit Schwerpunkt AWS, Spark und modernen DevOps-Praktiken.

• Entwicklung, Betrieb und Optimierung einer AWS-basierten Dateninfrastruktur in einem DevOps-Team
• Design, Implementierung und Weiterentwicklung von Spark-ETL-Pipelines
• Unterstützung bei der Operationalisierung von Machine-Learning-Modellen
• Enge Zusammenarbeit mit Data Owner:innen, Analyst:innen und Business-Stakeholdern
• Analyse von Anforderungen und Aufbau robuster, skalierbarer Datenprodukte
• Kontinuierliche Verbesserung durch Automatisierung, CI/CD und Infrastructure-as-Code (Terraform)

• Umsetzung der Lösungen im Einklang mit der Architektur und den Geschäftsanforderungen

• Hochschulabschluss in Informatik oder gleichwertige praktische Berufserfahrung
• Sehr gute Kenntnisse in Apache Spark, SQL und Python
• Erfahrung in der Softwareentwicklung (Scala/Java) von Vorteil
• Praktische Erfahrung mit AWS Analytics Services (Glue, Lambda, Athena, Batch, SageMaker)
• Mindestens 5 Jahre Projekterfahrung im Data-Engineering-Umfeld
• Interesse an DevOps, CI/CD, IaC und agiler Arbeitsweise
• Sehr gute mündliche und schriftliche Deutschkenntnisse, gute Englischkenntnisse