Dateningenieur (IT-Lösungen) in Sigma Software

25. Juli 2024

Dateningenieur (IT-Lösungen)

Kiew, Charkiw, Lemberg, Dnipro, Odessa, Winnyzja, Iwano-Frankiwsk, Luzk, Morschyn, Poltawa, Sumy, Ternopil, Tscherkassy, ​​Tscherniwzi, Budapest (Ungarn), Burgas (Bulgarien), Warschau (Polen), Krakau (Polen), abgelegen

Ich suche einen Dateningenieur, der ein kleines Team leitet und eine einfache Datenplattform in eine Cloud-basierte modernisiert Self-Service-Analyseprojekt.

KUNDE

Sigma Software bietet erstklassige Softwareentwicklung, Grafikdesign, Tests und Supportdienste. Systeme, die entwickelt wurden, um Kundennutzen in den Branchen Automobil, Telekommunikation, Luftfahrt, Werbung, Spiele, Banken, Immobilien und Gesundheitswesen zu bieten.

PROJEKT

Im Rahmen eines internen Projekts bei Sigma Software haben wir zwei Hauptziele: die Automatisierung der Berichterstellung und die Schaffung eines Self-Service-Datenanalysesystems für unser Unternehmen.

Sie sind dafür verantwortlich, Daten in DWH und Data Marts mithilfe von Spark und MS SQL zu entwerfen und zu modellieren, diese Daten BI-Ingenieuren zugänglich zu machen und mit ihnen zusammenzuarbeiten, die Berichte in Apache Superset erstellen, sowie andere Rollen, die solche Daten nutzen . Darüber hinaus arbeiten Sie mit verschiedenen anderen Teammitgliedern zusammen, die auf diese Daten angewiesen sind. Zu Ihren Aufgaben gehört die Umstellung unserer On-Premise-Lösung auf eine cloudbasierte Umgebung.

VERANTWORTLICHKEITEN

• Unser Ziel ist es, ein effizientes System zum Sammeln, Verarbeiten, Analysieren und Visualisieren großer Datenmengen aus verschiedenen Quellen zu schaffen

• Legen Sie den Grundstein und modellieren Sie die Daten

• Entwickeln Sie eine Plattform für den Aufbau und die Pflege von Datenpipelines, die Daten aus verschiedenen Quellen sammeln

• Erstellen Sie ein Data Warehouse

• Analysieren und bereiten Sie Domänenbeschreibungen in Zusammenarbeit mit Business Analytics vor

• Erstellen Sie Data Marts

• Entwerfen Sie ein Berechtigungsmodell mit flexibler Kontrolle über den vertikalen und horizontalen Zugriff auf Daten

ANFORDERUNGEN

• Konzeptionelle Kenntnisse der Grundlagen der Datenanalyse, z. B. dimensionale Modellierung, ETL/ELT, Reporting-Tools, Data Governance, Data Warehousing, strukturierte und unstrukturierte Daten

• Starke SQL-Kenntnisse und Erfahrung mit RDBMS, sichere Kenntnisse der Datenbankgrundlagen

• Erfahrung in der Datenbankentwicklung und Datenmodellierung, idealerweise mit Databricks/Spark

• Erfahrung mit Python

• Erfahrung mit Azure

• Kenntnisse über Serialisierungsformate und deren Kompromisse (spaltenweise vs. zeilenbasiert)

• Erfahrung im Debuggen und Optimieren von Spark-Jobs

• Starke schriftliche und mündliche Kommunikationsfähigkeiten

• Mindestens Englischniveau der oberen Mittelstufe < /p>

• Bachelor in Informatik oder einem verwandten Bereich

• Erfahrung mit einem Business-Intelligence-Tool ist von Vorteil