Інженер даних (Центр компетенції даних) в Sigma Software

Data Engineer (Data Competency Center) Київ, Львів, Дніпро, Одеса, Вінниця, Івано-Франківськ, Луцьк, Моршин, Чернівці Приєднуйтесь до Sigma Software, щоб бути в авангарді найцікавіших проектів і відігравати ключову роль у розвитку та успіху наших ініціатив і Competence Center. КЛІЄНТ Ми шукаємо інженера з обробки даних, який не тільки має великий досвід у розробці даних, але також готовий взяти на себе роль водія, сприяючи Центру компетенції даних у рамках Sigma Software. Ми шукаємо когось із захопленням обробкою даних, який дуже бажає вдосконалити свої навички та досвід у цій галузі. ОБОВ’ЯЗКИ Створення ETL-конвеєрів, конфігурацій оркестровки, CI/CDautomation, сценаріїв тощо. Аналізуйте, упорядковуйте та інтерпретуйте необроблені дані за допомогою сучасного стеку даних. Створюйте SQL-запити для ефективного маніпулювання даними. Сприяння та очолювання досконалості Data Engineering: досліджуйте технологічні тенденції та проводите аналіз найкращих практик, щоб забезпечити наші рішення залишаються найсучаснішими ВИМОГИ Вміння створювати, підтримувати, тестувати та надавати широкомасштабні конвеєри даних Експертиза ETL/ELT: практичний досвід роботи принаймні з одним наскрізним рішенням, а також його запуск, розробка та обслуговування Сильні знання Досвід SQL і теоретичне розуміння моделювання даних і оптимізації баз даних Принаймні 3 роки досвіду роботи з Python/Scala для обробки та перетворення даних Досвід роботи зі Spark, зосереджено на PySpark Практичний досвід роботи з основними фреймворками та бібліотеками в областях Data Engineering: Spark, Kafka, Airflow тощо, з підтвердженим досвідом налагодження та оптимізації Досвід роботи з хмарними рішеннями для обробки даних на AWS/Azure БУДЕ APLUS Досвід/сертифікація Databricks Досвід роботи з інженерією даних CI/CD Досвід роботи з такими інструментами BI, як Tableau, Qlik, Grafana або подібними. найцікавіших проектів тавідігравати ключову роль у розвитку тауспіху нашої ініціативи та Центру компетенцій. ЗАМОВНИК Мишукаємо Data Engineer, який не має сильного досвіду розробки даних, але й готовий взяти нашого лідера, сприяючи роботі нашого Центру компетенцій з обробки даних у Sigma Software. Мишукаємо людину, яка захоплює знання обробкою даних і прагне розвивати свої навички та досконалювати в цій галузі. ОБОВ'ЯЗКИ Створювати конвеєри ETL, конфігурації оркестрування, автоматизації CI/CD, скрипти тощо Аналізувати, організовувати та інтерпретувати необроблені дані, використовуючи сучасний стек даних Створювати SQL-запити для ефективного маніпулювання даними Робити внесок у розвиток інженерії даних табути лідером у цій галузі: Досліджувати технологічні тенденції тапроводити найкращих практик, щоб гарантувати, що наші рішення залишаються на найвищому рівні ВИМОГИ Досвід будівництва, обслуговування, тестування та впровадження конвеєрів даних великого обсягу Експертиза ETL/ELT: Практичний досвід роботи щонайбільше з попереднім рішенням повного циклу аналізу, а також досвід його впровадження, розвиток таобслуговування Глибокі знання SQL Досвід теоретичне розуміння моделювання даних таоптимізація бази даних Щонайменше 3роки досвіду роботи зPython/Scala для обробкии таперетворення даних Досвід роботи зіSpark, закцентом наPySpark Практичний досвід роботи зосновними фреймворками табібліотеками вобласті Data Engineering: Spark, Kafka, Airflow тощо, зпідтвердженим досвідом усунення помилок таоптимізації Досвід роботи зхмарними рішеннями для обробки даних наAWS/Azure ПЕРЕВАГОЮ БУДЕ: Досвід роботи зCI/CDв інженерії даних Досвід роботи зBIінструментами, такими якTableau, Qlik, Grafana або подібними Досвід роботи/сертифікація Databricks