Старший инженер-программист (Python) в Unicorn UA

Старший инженер-программист (Python)

удалено

Unicorn Systems — известная европейская компания, предоставляющая крупнейшие информационные системы и решения в области информации и коммуникационные технологии. Мы уделяем особое внимание высокой добавленной стоимости и конкурентным преимуществам для наших клиентов.

Сейчас мы ищем  старшего инженера-программиста в команду нашего клиента — мирового лидера в логистике, специализирующегося на международных доставках, курьерских услугах и перевозках.

Команда создает новое хранилище данных для данных об участках на основе моделирования Data Vault 2.0. В настоящее время основное внимание уделяется созданию первоначальной интеграции данных, и для этих задач необходима дополнительная поддержка.

Требования:

• Знание Python;
• Дополнительные навыки работы с JavaScript и Scala приветствуются;
• Знание Snowflake для хранения данных;
• Знакомство с архитектурными шаблонами, такими как Моделирование хранилища данных, Lakehouse и Объединение данных;
• Хорошие навыки пакетного приема данных с помощью Azure Data Factory (ADF) или Apache Spark;
• Уверенный опыт потокового приема данных с использованием Apache Kafka и Spark Streaming;
• Опыт работы с инструментами CI/CD, особенно Azure DevOps;
• Знакомство с другими инструментами CI/CD, такими как Jenkins и Git Actions, является плюсом;
• Владение бинарными форматами, такими как Parquet и Avro (основной), ORC как плюс;
• Знание других технологий хранения данных, таких как Synapse, а также понимание семантического управления версиями и эволюции схемы будут полезны;
• Владение английским языком на уровне Upper-Intermediate или выше.

Мы предлагаем:

• Удаленную работу на полный рабочий день.