Dateningenieur bei Microsoft Fabric @ AVENGA in AVENGA

Dateningenieur arbeitet an der Implementierung einer neuen Datenplattform für ein neues jährliches Kfz-Versicherungsprodukt. Die Plattform wird eine Lakehouse-Umgebung sein, die die Medaillon-Architektur in Microsoft Fabric nutzt. Von dem Kandidaten wird erwartet, dass er mit dem IT-Direktor und Business Intelligence-Analysten zusammenarbeitet, um Kfz-Versicherungsdaten aus mehreren Quellen zu erfassen, beim Entwurf von Lakehouse- und Warehouse-Tabellenschemata zu helfen, die Datenqualität zu verwalten und zu verbessern und sicherzustellen, dass das Projekt den Data Governance-Anforderungen entspricht. Diese Rolle ist von entscheidender Bedeutung für die Bereitstellung von Managementinformationen und Berichten für neue Jahresversicherungsprodukte sowie für die Bereitstellung wichtiger Daten für die Preis-, Underwriting- und Betrugsteams.

• Kenntnisse in SQL und Python als Datenverarbeitungssprachen
• Erfahrung mit Apache Spark oder Databricks als Datenverarbeitungs-Engines
• Ausgeprägte Erfahrung mit Lakehouse-Mustern und Medallion-Architektur im Data Engineering
• Vertrautheit mit Azure Data Services und anderen relevanten Datenverwaltungstools, einschließlich Microsoft Fabric, Synapse Analytics und Data Factory.

Dateningenieur arbeitet an der Implementierung einer neuen Datenplattform für ein neues jährliches Kfz-Versicherungsprodukt. Die Plattform wird eine Lakehouse-Umgebung sein, die die Medaillon-Architektur in Microsoft Fabric nutzt. Von dem Kandidaten wird erwartet, dass er mit dem IT-Direktor und Business Intelligence-Analysten zusammenarbeitet, um Kfz-Versicherungsdaten aus mehreren Quellen zu erfassen, beim Entwurf von Lakehouse- und Warehouse-Tabellenschemata zu helfen, die Datenqualität zu verwalten und zu verbessern und sicherzustellen, dass das Projekt den Data Governance-Anforderungen entspricht. Diese Rolle ist von entscheidender Bedeutung für die Bereitstellung von Managementinformationen und Berichten für neue Jahresversicherungsprodukte sowie für die Bereitstellung wichtiger Daten für die Preis-, Underwriting- und Betrugsteams.

,[ Medallion-Architektur implementieren: Wenden Sie die Medallion-Architektur an, um Datenschichten (Bronze, Silber, Gold) innerhalb des Lakehouse zu organisieren und so eine schrittweise Verbesserung der Datenqualität sicherzustellen., Datenspeicher entwerfen und optimieren: Skalierbare und sichere Datenspeicherlösungen entwickeln die mit den Prinzipien der Medaillon-Architektur übereinstimmen. Entwickeln Sie Datenverarbeitungspipelines: Erstellen und pflegen Sie robuste Datenpipelines für eine effiziente Datenaufnahme, -transformation und -konsolidierung. Stellen Sie Datenqualität und Compliance sicher: Halten Sie hohe Standards der Datenverwaltung ein und stellen Sie die Einhaltung von Branchenvorschriften und Datenschutzgesetzen sicher. Arbeiten Sie mit funktionsübergreifenden Teams zusammen: Arbeiten Sie eng mit Stakeholdern im gesamten Unternehmen zusammen, um Datenanforderungen zu verstehen und Erkenntnisse zu liefern, die strategische Entscheidungen vorantreiben.]
Anforderungen: SQL, Python, Apache Spark, Databricks, Lakehouse-Muster, Medallion-Architektur, Azure Data Services
Tools: Agile, Scrum.
Zusätzlich: Sportabonnement, private Gesundheitsversorgung, flache Struktur, kleine Teams, internationale Projekte, Worksmile, LuxMED, Multisport, Integrationsveranstaltungen.