AWS Data Engineer (m/w/d) – Python, ETL & Cloud-Infrastruktur
📅 Start: 01.01.2027 | ⏳ Dauer: 01.01.2027 - 31.12.2027 | 🕐 Auslastung: Gesamt PT 180 / davon Onsite PT 8 (in Frankfurt am Main) | 📍 Einsatzort: 60311 Frankfurt am Main
Projektdetails: Für dieses Projekt werden ausschließlich Bewerbungen von angestellten Mitarbeiter*innen (von Systemhäusern, IT - Dienstleistern, etc. ) akzeptiert. Freiberufler*innen und Eine-Person-GmbH /UG können beim Kunden leider nicht vorgestellt werden. Bitte sehen Sie als Freiberufler*innen von Bewerbungen ab.
Ihre Aufgaben
• Entwicklung und Betrieb einer Cloud-Anwendung auf Basis von Amazon AWS
• Entwicklung und Betrieb von ETL-Pipelines zur Datenanbindung/-aufbereitung mit Python inkl. Datenanbindung z.B. via APIs oder per Cross-Account-Zugriff
• Entwicklung und Betrieb von Datenbanken, basierend auf PostgreSQL/AWS RDS
• (Weiter-) Entwicklung automatisierter Unit-/Integrationstests, Data Quality Tests sowie von Monitoring, Logging und Alerting
• (Weiter-)Entwicklung automatisierter GitLab-CI/CD-Pipelines inkl. Integration von Security-Scannern (SAST, SCA, Dependency-Scans)
• Durchführen von Code-Reviews, Fehlerbehebung und Optimierung der Anwendungs-Performance
• Implementierung von Data Governance- und Sicherheitsrichtlinien
Anforderungen
• Must-have: Erfahrung in Softwareentwicklung mit Python (inkl. Testing, Code-Qualität, Wartbarkeit) - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung)
• Must-have: Erfahrung in der Entwicklung von AWS-Cloud-Anwendungen mit Lambda, Glue, RDS, Step Functions, Athena - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung)
• Must-have: Erfahrung als Data Engineer in der Entwicklung von ETL-Pipelines in Python bzw. PySpark inkl. Datenanbindung via APIs oder Cross-Account-Zugriff - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung)
• Must-have: Erfahrung in der Bereitstellung von Infrastruktur mittels Infrastructure as Code mit AWS CDK (Python) - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung)
• Must-have: Erfahrung im Aufbau und der Pflege von CI/CD-Pipelines mit GitLab CI zur automatisierten Bereitstellung von Anwendungscode und Infrastruktur - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung)
• Erfahrung in der Architekturkonzeption (inkl. Ausarbeitung von ADR) für Cloud-Anwendungen - Nachweis durch Erfahrungslevel in Jahren: Junior (<= 3 Jahre Erfahrung) - Gewichtung: 25%
• Jahre Erfahrung in Implementierung relationaler Datenbanken mit PostgreSQL / AWS RDS - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung) - Gewichtung: 25%
• Erfahrung in der Umsetzung von AWS-IAM- und Data-Governance-Konzepten (Rollen, Policies, Least-Privilege-Prinzip, feingranulare Zugriffssteuerung mit AWS Lake Formation) - Nachweis durch Erfahrungslevel in Jahren: Intermediate (> 3 Jahre Erfahrung) - Gewichtung: 25%
• Erfahrung in der Arbeit mit Daten des Schienenverkehrs - Nachweis durch Erfahrungslevel in Jahren: Junior (<= 3 Jahre Erfahrung) - Gewichtung: 25%
• projekt
• freelance