Data Engineer (в Европе) в Avenga

Data Engineer (в Европе) за кордоном Avenga ищет высококвалифицированного Data Engineer в Европе, чтобы присоединиться к нашей команде. Наш клиент — ведущая мировая финансово-консалтинговая компания, одна из крупнейших компаний по управлению активами в Великобритании. Сфера деятельности компании включает владение или владение ценными бумагами других компаний, кроме банков. Инженер AsaData, вы будете играть ключевую роль в создании и обслуживании нашей современной платформы данных. Ваш опыт в Snowflake, AWS, Python, PySpark, решениях для обработки данных в реальном времени и разработке программного обеспечения будет иметь решающее значение для продвижения наших инициатив в области данных. Что вы возьмете с собой: опыт работы инженером по обработке данных от 3 лет; Знание современных платформ данных и озер данных; Практический опыт работы со Snowflake; Превосходно работает с Python, PySpark и SQL; Понимание инфраструктур обработки данных в реальном времени, таких как Kafka, Flink или Spark Streaming; Знания и практический опыт работы с сервисами AWS; Английский язык — Upper-Intermediate и выше. Приятно иметь: Знание баз данных и аналитических технологий, включая базы данных MPP и NoSQL; Понимание распределенных систем; Знание инструментов «Инфраструктура как код» (IaC), предпочтительно Terraform. Это ваша миссия: отслеживать работоспособность и производительность запросов к данным и устранять неполадки по мере необходимости; Настройте среду, используя правильные правила безопасности и сценарии инфраструктурной конфигурации, а также предоставьте возможности мониторинга; Создавайте и оптимизируйте конвейеры данных, архитектуру и наборы данных, поддерживающие преобразование данных, структуры данных, метаданные, управление зависимостями и рабочей нагрузкой; Участвовать в разработке и оптимизации конвейеров данных, архитектуры и наборов данных для поддержки преобразования данных, управления метаданными и оптимизации рабочей нагрузки; Помогите разработать уровень хранения данных для наших решений для озер и хранилищ данных. Ваши преимущества: каждый сотрудник Avenga может расти профессионально благодаря нашей программе наставничества; Компания предоставляет возможности расширенного обучения и сертификации; Мы содействуем профессиональной свободе, предлагая бесплатные курсы английского и испанского языка от A1 до C2; Avenga заботится о своих сотрудниках, наши HRP-партнеры окажут вам полную поддержку; Мы предлагаем привлекательную реферальную бонусную программу; В нашей команде каждый тщательно следит за своим балансом между работой и личной жизнью, поэтому мы предоставляем 21 день в году неоплачиваемых отпусков.