Intermediate-Data-Engineer (m/w/d) (Python, AWS, S3, Lambda React, Typescript) - Remote und Frankfurt

Projektbeschreibung:

Das Projekt hat folgenden Inhalt: Ziel des Projektes ist die Entwicklung einer datengetriebenen Cloud-Anwendung zur Quantifizierung von Unpünktlichkeitstreibern im Schienenverkehr. Dazu werden verschiedene relevante Datenquellen an einen Data Lake angebunden und unter Verwendung komplexer Algorithmik aufbereitet und hinsichtlich ihres Pünktlichkeitseffektes bewertet. Die u.a. über ein Frontend und eine REST API bereitgestellten Ergebnisse schaffen eine wichtige Grundlage zur Ableitung wirksamer, pünktlichkeitssteigernder Maßnahmen.  

Aufgabenbeschreibung:

• Der Auftragnehmer erbringt unter dem Vertrag nachfolgend genannte Leistungen eigenständig und selbstorganisiert:
• Entwicklung und Betrieb (Fullstack) einer Cloud-Anwendung auf Basis von Amazon AWS
• Entwicklung und Betrieb von ETL-Pipelines zur Datenanbindung/-aufbereitung mit Python
• Entwicklung und Betrieb eines Frontends mit React und TypeScript
• Entwicklung und Betrieb von APIs (REST, GraphQL) in Python und TypeScript
• Entwicklung und Betrieb von Datenbanken, basierend auf PostgreSQL / AWS RDS
• (Weiter-)Entwicklung automatisierter Unit-/Integrationstests, Data Quality Tests sowie Erweiterung von CI/CD-Pipelines
• Durchführen von Code-Reviews, Fehlerbehebung und Optimierung der Anwendungs-Performance
• Implementierung von Data Governance- und Sicherheitsrichtlinien

MUSS-Anforderung: (zwingend zu erfüllen)

• Mind. 4 Jahre Erfahrung in der Softwareentwicklung mit; Python 4+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 3 Jahre Erfahrung in Entwicklung und Betrieb von AWS Cloud-basierten Anwendungen u.a. mit AWS CDK, S3, Step Function, Glue, Lambda, Lake Formation; 3+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 2 Jahre Erfahrung als Data Engineer in der Entwicklung von ETL-Pipelines; 2+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 2 Jahre Erfahrung in der Entwicklung und Betrieb von Webanwendungen mit React und TypeScript; 2+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 1 Jahr Erfahrung in Entwicklung und Betrieb von APIs (GraphQL / REST); 1+ Jahre praktische Erfahrung sind im CV nachvollziehbar

SOLL-Anforderung:

• Mind. 2 Jahre Erfahrung in Implementierung relationaler Datenbanken mit PostgreSQL / AWS RDS; 2+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 2 Jahre Erfahrung mit GitLab CI/CD; 2+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 1 Jahr Erfahrung in AWS VPC, AppSync, Application Load Balancer; 1+ Jahre praktische Erfahrung sind im CV nachvollziehbar
• Mind. 1 Jahr Erfahrung in WebSSO und AzureAD; 1+ Jahre praktische Erfahrung sind im CV nachvollziehbar