Senior Data Engineer (IT-Lösungen) in Sigma Software Group

UnternehmensbeschreibungIch suche einen Senior Data Engineer, der ein kleines Team leitet und eine einfache Datenplattform in ein cloudbasiertes Self-Service-Analyseprojekt modernisiert. KUNDEN Sigma Software bietet erstklassige Softwareentwicklung, Grafikdesign, Tests und Supportdienste. Systeme, die entwickelt wurden, um Kundennutzen in den Branchen Automobil, Telekommunikation, Luftfahrt, Werbung, Spiele, Banken, Immobilien und Gesundheitswesen zu bieten. PROJEKT Innerhalb eines internen Projekts bei Sigma Software haben wir zwei Hauptziele: die Berichterstellung zu automatisieren und einen Self-Service zu schaffen Datenanalysesystem für unser Unternehmen. Sie sind dafür verantwortlich, Daten in DWH und Data Marts mithilfe von Spark und MS SQL zu entwerfen und zu modellieren, diese Daten BI-Ingenieuren zur Verfügung zu stellen und mit ihnen zusammenzuarbeiten, die Berichte in Apache Superset erstellen, sowie andere Rollen, die solche Daten nutzen . Darüber hinaus arbeiten Sie mit verschiedenen anderen Teammitgliedern zusammen, die auf diese Daten angewiesen sind. Zu Ihren Aufgaben gehört die Umstellung unserer On-Premise-Lösung auf eine Cloud-basierte Umgebung.StellenbeschreibungUnser Ziel ist es, ein effizientes System zum Sammeln, Verarbeiten, Analysieren und Visualisieren großer Datenmengen aus verschiedenen Quellen zu schaffen. Legen Sie die Grundlage und das Modell fest die DatenEntwickeln Sie eine Plattform für den Aufbau und die Pflege von Datenpipelines, die Daten aus verschiedenen Quellen sammeln. Erstellen Sie ein Data Warehouse. Analysieren und bereiten Sie Domänenbeschreibungen in Zusammenarbeit mit Business Analytics vor. Erstellen Sie Data Marts. Entwerfen Sie ein Berechtigungsmodell mit flexibler Kontrolle über den vertikalen und horizontalen Zugriff auf Daten. Qualifikationen. Konzeptionelle Kenntnisse der Grundlagen der Datenanalyse, z. B. , dimensionale Modellierung, ETL/ELT, Reporting-Tools, Data Governance, Data Warehousing, strukturierte und unstrukturierte Daten. Starke SQL-Kenntnisse und Erfahrung mit RDBMS, sichere Kenntnisse der Datenbankgrundlagen. Erfahrung in der Datenbankentwicklung und Datenmodellierung, idealerweise mit Databricks/Spark. Erfahrung mit PythonWorking Kenntnisse über Serialisierungsformate und deren Kompromisse (spalten- oder zeilenbasiert) Erfahrung im Debuggen und Optimieren von Spark-Jobs Starke schriftliche und mündliche Kommunikationsfähigkeiten Mindestens ein Bachelor-Abschluss in Englisch der oberen Mittelstufe in Informatik oder einem verwandten Bereich Erfahrung in einem Unternehmen Intelligence-Tool ist ein nettes Hilfsmittel. Mehr anzeigen Weniger anzeigen Галузи Розробка програмного забезпечення