Senior Data Engineer (#1295) в N-iX

Про нашого клієнта:
Місія OVO Group полягає в спрямуванні до життя з нульовим викидом вуглецю. Ми — OVO Group, велика сім’я компаній, об’єднаних єдиним баченням: швидко досягти нульового викиду вуглецю.
Ми називаємо цей план Zero — і він показує, як ми боротимемося з кліматичною кризою та трансформуємо як люди використовують енергію протягом наступного десятиліття. Щоб зробити це, нам потрібні найгостріші уми. Чи готові ви прийняти цей виклик?
Робіть чудові екологічні речі з OVO Energy
З моменту запуску в 2009 році так багато змінилося. Але наша мета залишається незмінною: робити енергію

< /p>

Обов’язки:
Перевірений досвід проектування, створення, моніторингу та керування великомасштабними продуктами даних, конвеєрами, інструментами та платформами.
Робота над потоковим передаванням Рішення ETL, що використовують інструменти обробки потокових даних (наприклад, Kafka Streams, Kinesis, Spark або подібні). Розробка інфраструктури рішення сегментації для перебудови поточного рішення разом із командою інженерів TS(JS).
Вам буде комфортно працювати в гнучкому середовищі розробки програмного забезпечення та матимете досвід роботи з CI/CD і стратегіями розгортання. Аналіз поточної обробки даних за допомогою Datadog або подібних рішень.

Якщо у вас є пристрасть до створення масштабованих, стійких рішень і вам подобається впливати на вибір технологій і архітектурний напрям команди, тоді подивіться не далі!

Вимоги:

• Знання найкращих практик і методологій у сховищах даних
• 5 багаторічний досвід у розробці даних
• Перевірений досвід проектування, створення, моніторингу та керування великомасштабними продуктами даних, конвеєрами, інструментами та платформами.
• Досвід роботи над потоковим ETL рішення, які використовують інструменти обробки потокових даних (наприклад, Kafka Streams, Kinesis, Spark або подібні).
• Python або інша мова програмування (Scala, Typescript, Java, Kotlin)
• Досвід роботи з BigQuery, Data Fusion
• Вправне володіння розробкою та обслуговуванням ETL
• Досвід роботи з хмарним GCP (бажано), AWS або Azure
• Досвід адміністрування баз даних і MSSQL буде перевагою
• Досвід роботи з Docker & Kubernetes, Terraform буде плюсом
• Рівень англійської мови вище середнього