Старший инженер данных в Avenga

10 июля 2024 г.

Старший инженер по данным

Киев, Харьков, Львов, Винница, Ивано-Франковск, Луцк, Полтава, Хмельницкий, Черкассы, за кордоном, виддалено

Мы ищем опытного старшего инженера по обработке данных в нашу команду. Наш клиент — компания, занимающаяся рекламными технологиями, которая в режиме реального времени предоставляет показатели эффективности и результативности маркетинга.

Как старший инженер по обработке данных вы будете играть важную роль в создании и поддержании нашей современной платформы данных. Ваш опыт в области Snowflake, AWS, Python, решений для обработки данных в реальном времени и разработки программного обеспечения будет иметь решающее значение для продвижения наших инициатив в области данных.

Что вы возьмете с собой:

• более 5 лет опыта работы в области инженерии данных;
• Знание Python, SQL;
• Знание хотя бы одного инструмента оркестровки (Airflow, Dagster и т. д.);
• Опыт работы с Apache Spark;
• Знакомство со столбцовыми хранилищами данных SQL, такими как Snowflake или Redshift;
• Владение набором инструментов обработки данных AWS (S3, Glue, Lambda и т. д.);
• Значительный опыт работы с широким спектром систем баз данных;
• Сильные коммуникативные навыки как с техническими, так и с нетехническими членами команды;
• Английский — как минимум уверенный уровень Upper-Intermediate.

Приятно иметь:

• Бакалавр/магистр наук в области компьютерных наук или смежных дисциплин (математика, инженерное дело и т. д.);
• Знание распределенных систем обмена сообщениями, таких как Apache Kafka или Amazon SNS;
• Опыт работы с Databricks, Deltalake.

Ваша миссия:

• Создавать и поддерживать передовую платформу данных, используя такие технологии, как Snowflake, Python, и сервисы AWS;
• Создавайте и оптимизируйте конвейеры данных, архитектуру и наборы данных, поддерживающие преобразование данных, структуры данных, метаданные, управление зависимостями и рабочей нагрузкой;
• Разработать уровень хранения данных как для озера данных, так и для хранилища данных;
• Определить возможности для улучшения внутренних процессов, таких как автоматизация ручных процессов, оптимизация доставки данных и масштабируемость инфраструктуры;
• Отслеживать работоспособность и производительность запросов;
• Сотрудничайте с инженерами по обработке данных и другими заинтересованными сторонами, чтобы понимать их требования, предлагать решения для обработки данных и эффективно обмениваться информацией или выводами, полученными на основе данных.

Ваши преимущества:

• Мы предлагаем привлекательный социальный пакет и пакет льгот;
• Каждый сотрудник Avenga может расти профессионально благодаря нашей программе наставничества;
• Наши специалисты регулярно проходят обзоры эффективности и технические оценки для определения планов развития;
• Компания предоставляет возможности расширенного обучения и сертификации;
• Мы остаемся в курсе событий отрасли, проводя технические переговоры, вебинары, конференции и хакатоны;
• Avenga заботится о благополучии своих сотрудников, обеспечивая всестороннее медицинское страхование и программы компенсации за фитнес;
• Семьи наших сотрудников не менее важны, поскольку мы предлагаем помощь по беременности и родам и финансовую поддержку по ряду семейных причин, в том числебракосочетание и роды;
• Компания воспитывает чувство профессиональной принадлежности и атмосферу единения: мы вместе достигаем целей и отмечаем наши вехи.