Старший инженер по данным (Profisee MDM) в EPAM Systems

ОписаниеНаш клиент предоставляет продукты по страхованию имущества, сельскому хозяйству, киберрискам, бизнесу, страхованию от несчастных случаев и перестрахованию. Мы ищем старшего инженера по обработке данных, который присоединится к нашей команде. Как старший инженер по данным, вы будете играть решающую роль в построении и оптимизации конвейеров и архитектур данных, а также в интеграции данных из различных источников. Вы будете отвечать за проектирование, разработку и поддержку решений по интеграции данных с использованием Azure Analytics, Azure Data Factory, Azure Databricks, Azure Pipelines и других платформ интеграции данных (ETL/ELT). Наш идеальный кандидат имеет большой опыт работы в области проектирования данных и Опыт работы с инструментом Profisee Master Data Management. Обязанности: Разработка и внедрение решений по интеграции данных с использованием Azure Analytics, Azure Data Factory, Azure Databricks и Azure Pipelines. Разработка и поддержка процессов ETL/ELT для сбора, преобразования и загрузки данных из различных источников в хранилища данных. Оптимизация конвейеров данных. и архитектуры для повышения эффективности и масштабируемости. Сотрудничество с межфункциональными командами для понимания требований к данным и предоставления технических решений. Устранение неполадок и решение проблем интеграции данных. Выполнение проверки данных и проверок качества для обеспечения точности и целостности данных. Быть в курсе отраслевых тенденций и лучших практик в области инженерии данных. Требования3+ многолетний опыт работы инженером по данным с опытом интеграции данныхAzure Analytics, Azure Data Factory, Azure Databricks, Azure Pipelines, платформы интеграции данных (ETL/ELT), PySpark, Azure Synapse Analytics, PythonОпыт разработки и управления сквозными конвейерами данных Решения ETL (извлечение, преобразование, загрузка) и ELT (извлечение, загрузка, преобразование). Способность проектировать и создавать комплексные решения для обработки данных с использованием Azure Synapse Analytics. Хорошее понимание принципов моделирования данных, Lakehouse, хранилищ данных и управления данными. Отлично. навыки общения и совместной работы для эффективной работы с межфункциональными Agile-командами. Уровень английского языка выше среднего, как устный, так и письменный (B2+). Приятно иметь Microsoft SQL Server, Microsoft SQL Server Integration Services, Python, SQL. Понимание Azure DevOps Pipelines. Понимание принципов проектирования через тестирование и Платформы модульного тестирования, такие как PyTestМы предлагаем конкурентное вознаграждение в зависимости от опыта и навыков. Индивидуальный карьерный путь. Неограниченный доступ к учебным решениям LinkedIn. Больничный и регулярные каникулы. Занятия по английскому языку с сертифицированными преподавателями английского языка. Гибкий график работы. Показать больше Показывай меньше Посадовый ровень Старший середний рівень Тип занятости Повний рабочий день Посадочные обвязки Информационные технологии Галузи ИТ-послуги и ИТ Консалтинг