Inżynier danych w Microsoft Fabric @ AVENGA w AVENGA

Inżynier danych do pracy nad wdrożeniem nowej platformy danych dla nowego rocznego produktu ubezpieczenia komunikacyjnego. Platformą będzie środowisko Lakehouse wykorzystujące architekturę medalionową w Microsoft Fabric. Od kandydata oczekuje się współpracy z dyrektorem ds. analityków IT i analityki biznesowej przy pozyskiwaniu danych dotyczących ubezpieczeń komunikacyjnych z wielu źródeł, pomaganiu w projektowaniu schematów tabel Lakehouse i hurtowni, zarządzaniu i ulepszaniu jakości danych oraz zapewnianiu zgodności projektu z wymogami zarządzania danymi. Ta rola odgrywa kluczową rolę w dostarczaniu informacji zarządczych i raportowaniu dla nowego rocznego produktu ubezpieczeniowego oraz dostarczaniu kluczowych danych zespołom ds. cen, ubezpieczeń i oszustw.

• Biegła znajomość SQL i Python jako języków przetwarzania danych
• Doświadczenie z Apache Spark lub Databricks jako silnikami przetwarzania danych
• Duże doświadczenie z wzorcami Lakehouse i architekturą medalionową w inżynierii danych
• Znajomość Azure Data Services i innych odpowiednich narzędzi do zarządzania danymi, w tym Microsoft Fabric, Synapse Analytics i Data Factory.

Inżynier Danych do pracy nad wdrożeniem nowej platformy danych dla nowego Rocznego Produktu Ubezpieczenia Komunikacyjnego. Platformą będzie środowisko Lakehouse wykorzystujące architekturę medalionową w Microsoft Fabric. Od kandydata oczekuje się współpracy z dyrektorem ds. analityków IT i analityki biznesowej przy pozyskiwaniu danych dotyczących ubezpieczeń komunikacyjnych z wielu źródeł, pomaganiu w projektowaniu schematów tabel Lakehouse i hurtowni, zarządzaniu i ulepszaniu jakości danych oraz zapewnianiu zgodności projektu z wymogami zarządzania danymi. Ta rola odgrywa kluczową rolę w dostarczaniu informacji zarządczych i raportowaniu dla nowego rocznego produktu ubezpieczeniowego oraz dostarczaniu kluczowych danych zespołom ds. cen, ubezpieczeń i oszustw.

,[ Wdrożenie architektury medalionowej:Zastosuj architekturę medalionową do organizowania warstw danych (brązowych, srebrnych, złotych) w Lakehouse, zapewniając stopniową poprawę jakości danych., Projektuj i optymalizuj przechowywanie danych:Opracuj skalowalne i bezpieczne rozwiązania do przechowywania danych które są zgodne z zasadami architektury medalionowej. Opracuj potoki przetwarzania danych: Buduj i utrzymuj solidne potoki danych w celu wydajnego pozyskiwania, transformacji i konsolidacji danych. Zapewniaj jakość i zgodność danych: Utrzymuj wysokie standardy zarządzania danymi, zapewniając zgodność z przepisami branżowymi i przepisami dotyczącymi prywatności danych. Współpracuj z zespołami wielofunkcyjnymi: Ściśle współpracuj z interesariuszami w całej firmie, aby zrozumieć wymagania dotyczące danych i dostarczać spostrzeżeń, które wpływają na decyzje strategiczne.]
Wymagania: SQL, Python, Apache Spark, Kostki danych, wzorce Lakehouse, architektura medalionów, Azure Data Services
Narzędzia: Agile, Scrum.
Dodatkowo: Abonament sportowy, Prywatna opieka medyczna, Płaska struktura, Małe zespoły, Projekty międzynarodowe, Worksmile, LuxMED, Multisport, Imprezy integracyjne.