Інженер даних із Microsoft Fabric @ AVENGA в AVENGA

Інженер із обробки даних працюватиме над впровадженням нової платформи даних для нового річного продукту страхування автомобілів. Платформа буде середовищем Lakehouse з використанням медальйонної архітектури в Microsoft Fabric. Очікується, що кандидат працюватиме з директором відділу інформаційних технологій і аналізу бізнес-аналітиків, щоб отримувати дані страхування транспортних засобів із багатьох джерел, допомагати в розробці схем таблиць Lakehouse і складів, керувати та покращувати якість даних і гарантувати відповідність проекту вимогам управління даними. Ця роль є ключовою для надання управлінської інформації та звітності для нового річного страхового продукту та надання ключових даних командам ціноутворення, андеррайтингу та шахрайства.

• Володіння SQL і Python як мовами обробки даних
• Досвід роботи з Apache Spark або Databricks як механізмами обробки даних
• Значний досвід роботи з шаблонами Lakehouse і медальйонною архітектурою в розробці даних
• Знайомство з Azure Data Services та іншими відповідними інструментами керування даними, включаючи Microsoft Fabric, Synapse Analytics і Data Factory.

Інженер з даних працюватиме над впровадженням нової платформи даних для нового річного продукту страхування транспортних засобів. Платформа буде середовищем Lakehouse з використанням медальйонної архітектури в Microsoft Fabric. Очікується, що кандидат працюватиме з директором відділу інформаційних технологій і аналізу бізнес-аналітиків, щоб отримувати дані страхування транспортних засобів із багатьох джерел, допомагати в розробці схем таблиць Lakehouse і складів, керувати та покращувати якість даних і гарантувати відповідність проекту вимогам управління даними. Ця роль є ключовою для надання управлінської інформації та звітності для нового річного страхового продукту та надання ключових даних командам ціноутворення, андеррайтингу та шахрайства.

,[ Реалізація архітектури медальйона: Застосування архітектури медальйона для організації рівнів даних (бронза, срібло, золото) у Lakehouse, забезпечуючи поступове покращення якості даних. Проектування та оптимізація зберігання даних: розробка масштабованих і безпечних рішень для зберігання даних які відповідають принципам архітектури медальйона. Розробка конвеєрів обробки даних: створення та підтримка надійних конвеєрів даних для ефективного прийому, перетворення та консолідації даних. Забезпечення якості та відповідності даних: дотримання високих стандартів управління даними, забезпечення дотримання галузевих норм і законів про конфіденційність даних. Співпрацюйте з міжфункціональними командами: тісно співпрацюйте із зацікавленими сторонами всієї компанії, щоб зрозуміти вимоги до даних і надати інформацію, яка керує стратегічними рішеннями.]
Вимоги: SQL, Python, Apache Spark, Databricks, Lakehouse Patterns, Medallion Architecture, Azure Data Services
Інструменти: Agile, Scrum.
Додатково: Спортивна підписка, Приватна медицина, Плоска структура, Малі команди, Міжнародні проекти, Worksmile, LuxMED, Мультиспорт, Інтеграційні заходи.