Старший инженер Python (AWS, Kafka) в Luxoft

Старший инженер Python (AWS, Kafka) Отдалено Описание проекта: Команда отвечает за создание группы сервисов, которые будут вводить данные из вышестоящих систем в аналитическую платформу Nordstrom, преобразовывать и хранить. Система предоставит доступ к уже агрегированному профилю. Цель проекта — ускорить доставку всех данных, что позволит получать более свежие данные и быстрее действовать. Кроме того, кандидат должен быть готов к периодической поддержке по вызову в течение 12/7 часов. Обязанности: — реализация новых функций — MR-ревью для других членов команды — исправление ошибок в существующих функциях — рефакторинг/перепроектирование существующей базы кода — улучшение тестового покрытия — сборка и доставка артефактов продукта в кластер разработчиков/продуктов — обновления инфраструктуры Описание обязательных навыков: — 4 года опыта работы с Python — Опыт работы с AWS (S3, SQS, IAM, Secret Manager, KMS) — Apache Airflow — Apache Kafka — Apache Spark — опыт работы с SQL или DWH — Опыт работы с контролем версий, сборкой, инструментом CI/CD (предпочтительно GitLab-CI) — Понимание ядра концепции больших данных (Common, Spark и т. д.) — Опыт работы с JIRA, Confluence — Способность работать с Java — Знакомство с методологией гибкой разработки (Scrum) — Четкие коммуникативные навыки (будем общаться во всех регионах) — Практический опыт работы с поддержкой по вызову Приветствуются навыки: —Опыт работы с Teradata —Практическое использование Kubernetes —Google Cloud Platform —Опыт работы со стеком больших данных, особенно с Flink, Hive, Trino для SQL —Vault —IaC (предпочтительно Terraform) Языки: английский: B2Upper Intermediate