Старший инженер Python (AWS, Kafka) в Luxoft

Описание проекта: Команда отвечает за создание группы сервисов, которые будут вводить данные из вышестоящих систем в аналитическую платформу Nordstrom, преобразовывать и хранить. Система предоставит доступ к уже агрегированному профилю. Цель проекта — ускорить доставку всех данных, что позволяет получать более свежие данные и быстрее действовать. Кроме того, кандидат должен быть готов к периодической поддержке по вызову в течение 12/7 часов. Обязанности: — реализация новых функций — MR-проверка для других членов команды — исправление существующих функций — рефакторинг /перепроектирование существующей базы кода — улучшение тестового покрытия — создание и доставка артефактов продукта в кластер Dev/Prod — обновления инфраструктуры. Описание обязательных навыков: — опыт работы с Python более 4 лет — опыт работы с AWS (S3, SQS, IAM, Secret Manager, KMS) — Apache Airflow — Apache Kafka — Apache Spark — опыт работы с SQL или DWH — Опыт работы с контролем версий, сборкой, инструментом CI/CD (предпочтительно GitLab-CI) — Понимание основных концепций больших данных (Common, Spark и т. д.) — Опыт работы с JIRA, Confluence — умение работать с Java — Знакомство с методологией гибкой разработки (Scrum) — Четкие коммуникативные навыки (будем общаться во всех регионах) — Практический опыт поддержки по вызову Навыки, которые приятно иметь: — Опыт работы с Teradata — Практическое использование Kubernetes — Google Cloud Platform — Опыт работы со стеком больших данных, особенно с Flink, Hive, Trino для SQL — Vault — IaC (предпочтительно. Terraform)Языки:Английский: B2Upper Intermediate