Dateningenieur (Datenkompetenzzentrum) in Sigma Software

Kommen Sie zu uns bei Sigma Software, um an der Spitze der interessantesten Projekte zu stehen und eine entscheidende Rolle für das Wachstum und den Erfolg unserer Initiativen und unseres Kompetenzzentrums zu spielen.

KUNDE
Wir suchen einen Dateningenieur, der nicht nur über ausgeprägte Fachkenntnisse im Bereich Datentechnik verfügt, sondern auch bereit ist, eine treibende Rolle zu übernehmen und einen Beitrag zu unserem Projekt zu leisten Datenkompetenzzentrum innerhalb von Sigma Software. Wir suchen jemanden, der sich für die Datenverarbeitung begeistert und unbedingt seine Fähigkeiten und sein Fachwissen in diesem Bereich erweitern möchte.

VERANTWORTLICHKEITEN
Erstellen Sie ETL-Pipelines, Orchestrierungskonfigurationen, CI/CD-Automatisierung, Skripts usw.
Analysieren, organisieren , und interpretieren Rohdaten mithilfe eines modernen Datenstapels
Erstellen Sie SQL-Abfragen, um Daten effizient zu manipulieren
Beitrag zur Exzellenz im Bereich Data Engineering und deren Vorreiter: Erforschen Sie Technologietrends und führen Sie Best-Practice-Analysen durch, um sicherzustellen, dass unsere Lösungen auf dem neuesten Stand bleiben. the-art
 
ANFORDERUNGEN
Kompetenz im Erstellen, Warten, Testen und Bereitstellen großer Datenpipelines skalieren
ETL/ELT-Expertise: Praktische Erfahrung mit mindestens einer End-to-End-Lösung sowie deren Start, Entwicklung und Wartung
Ausgeprägte SQL-Kenntnisse
Erfahrung und theoretisches Verständnis im Bereich Daten Modellierung und Datenbankoptimierungen
Mindestens 3 Jahre Kenntnisse in Python/Scala für Datenverarbeitung und -transformationen
Erfahrung mit Spark, mit Schwerpunkt auf PySpark
Praktische Erfahrung mit den wichtigsten Frameworks und Bibliotheken in Data-Engineering-Domänen: Spark, Kafka, Airflow usw. mit nachweislicher Erfahrung im Debuggen und Optimieren
Erfahrung mit cloudbasierten Datenverarbeitungslösungen auf AWS/Azure

Wäre ein Pluspunkt
Databricks-Erfahrung/Zertifizierung
Erfahrung mit CI/CD im Data Engineering
Erfahrung mit BI-Tools wie Tableau, Qlik, Grafana oder ähnlichem