Data Engineer

Über das Unternehmen

Die FourEnergy GmbH ist ein innovatives Technologieunternehmen, das sich auf die Entwicklung zukunftsweisender Energielösungen spezialisiert hat. Mit einem hochqualifizierten Team arbeiten wir ständig daran, neue Maßstäbe in Sachen Effizienz, Nachhaltigkeit und Leistungsfähigkeit zu setzen.

Deine Aufgaben

• Entwicklung, Betrieb und Automatisierung performanter Datenpipelines (ETL/ELT)
• Umsetzung skalierbarer Datenverarbeitungsprozesse für große Datenmengen im Batch- und Streaming-Umfeld
• Entwicklung datengetriebener Komponenten und Pipelines in Python
• Implementierung komplexer Datentransformationen und Geschäftslogik mittels SQL
• Performance-Optimierung von Abfragen, Transformationen und Datenflüssen
• Verarbeitung und Analyse großer Datenvolumina mit Big-Data-Frameworks wie Spark, Flink oder Beam
• Strukturierung und Weiterentwicklung von Data-Lake- bzw. Lakehouse-Architekturen
• Sicherstellung von Datenqualität, Nachvollziehbarkeit und Stabilität der Pipelines
• Enge Zusammenarbeit mit Data Scientists, Analysten und angrenzenden Entwicklungsteams
• Dokumentation von Datenmodellen, Pipelines und Transformationslogiken

Dein Profil

• Mehrjährige praktische Erfahrung in der Entwicklung von Datenpipelines im Big-Data-Umfeld
• Sehr gute Kenntnisse in Python für Datenverarbeitung, ETL/ELT-Prozesse und Automatisierung
• Fundierte SQL-Kenntnisse für komplexe Transformationen, Joins und Performance-Tuning
• Erfahrung mit Big-Data-Frameworks wie Apache Spark, Flink oder Beam
• Erfahrung mit Data-Lake- oder Lakehouse-Architekturen und deren Schichtenkonzepten
• Verständnis für skalierbare Datenarchitekturen und verteilte Systeme
• Analytische und strukturierte Arbeitsweise
• Fähigkeit, fachliche Anforderungen in robuste technische Lösungen zu übersetzen
• Selbstständigkeit, Qualitätsbewusstsein und Problemlösungskompetenz

Wünschenswert

• Erfahrung mit Workflow-Orchestrierung (z.B. Airflow)
• Kenntnisse in Cloud-basierten Datenplattformen
• Grundverständnis von Containerisierung und CI/CD