Інженер даних (Центр компетенції даних) в Sigma Software

Приєднуйтесь до нас у Sigma Software, щоб бути в авангарді найцікавіших проектів і відігравати ключову роль у розвитку й успіху наших ініціатив і Центру компетенції.

ЗАМОВНИК
Ми шукаємо Інженера з обробки даних, який має не тільки великий досвід у розробці даних, але також готовий взяти на роль водія, сприяючи нашому Центр компетенції даних у складі Sigma Software. Ми шукаємо людину, яка захоплена обробкою даних, яка бажає розвинути свої навички та досвід у цій галузі.

ОБОВ'ЯЗКИ
Створюйте конвеєри ETL, конфігурації оркестровки, автоматизацію CI/CD, сценарії тощо.
Аналізуйте, упорядковуйте , і інтерпретувати необроблені дані за допомогою сучасного стеку даних
Створювати запити SQL для ефективного маніпулювання даними
Внесок у досконалість Data Engineering та очолити її: досліджуйте технологічні тенденції та проводите аналіз найкращих практик, щоб переконатись, що наші рішення залишаються на найвищому рівні the-art
 
ВИМОГИ
Вміння створювати, підтримувати, тестувати та надавати великі масштабування конвеєрів даних
Експертиза ETL/ELT: практичний досвід роботи принаймні з одним наскрізним рішенням, його запуск, розробка та обслуговування
Досконале знання SQL 
Досвід і теоретичне розуміння даних моделювання та оптимізація баз даних
Принаймні 3 роки досвіду роботи з Python/Scala для обробки та перетворення даних
Досвід роботи зі Spark, зосереджено на PySpark
Практичний досвід роботи з основними фреймворками та бібліотеками в Області Data Engineering: Spark, Kafka, Airflow тощо, з підтвердженим досвідом налагодження та оптимізації
Досвід роботи з хмарними рішеннями обробки даних на AWS/Azure

БУДЕ ПЕРЕВАГОЮ
Досвід/сертифікація Databricks
Досвід роботи з CI/CD у розробці даних
Досвід роботи з такими інструментами BI, як Tableau, Qlik, Grafana чи подібними