Data Engineer (Data Competency Center) in Sigma Software

Joinus atSigma Software tobeatthe forefront ofthe most interesting projects and play apivotal role inthe growth and success ofour initiatives and Competence Center. CUSTOMER Weare looking for aData Engineer who not only has strong expertise indata engineering but isalso ready totake onadriver role, contributing toour Data Competency Center within Sigma Software. Weseek someone passionate about data processing who strongly desires togrow their skills and expertise inthis field.RESPONSIBILITIES Create ETLpipelines, orchestration configurations, CI/CDautomation, scripts, etc.Analyze, organize, and interpret raw data using amodern data stackCreate SQL queries toefficiently manipulate dataContributing toand spearheading Data Engineering excellence: Research technology trends and conduct best practices analysis toensure our solutions remain state-of-the-art REQUIREMENTSProficiency inbuilding, maintaining, testing, and delivering large-scale data pipelinesETL/ELT expertise: Practical experience with atleast one end-to-end solution and its start, development, and maintenanceStrong knowledge ofSQL Experience and theoretical understanding indata modeling and database optimizationsAtleast 3years ofproficiency inPython/Scala for data processing and transformationsExperience with Spark, with afocus onPySparkHands-on experience with main frameworks and libraries inData Engineering domains: Spark, Kafka, Airflow, etc., with aproven record ofdebugging and optimization experienceExperience with cloud-based data processing solutions onAWS/AzureWOULDBE APLUSDatabricks experience/certificationExperience with CI/CD indata engineeringExperience withBI tools such asTableau, Qlik, Grafana orsimilarПриєднуйся донас уSigma Software, щоб бути вцентрі уваги найцікавіших проєктів тавідігравати ключову роль урозвитку тауспіху наших ініціатив таЦентру компетенцій.ЗАМОВНИК Мишукаємо Data Engineer, який нетільки має сильний досвід вінженерії даних, але йготовий взяти насебе роль лідера, сприяючи роботі нашого Центру компетенцій зобробки даних вSigma Software. Мишукаємо людину, яка захоплюється обробкою даних іпрагне розвивати свої навички тавдосконалювати знання вцій галузі.ОБОВ’ЯЗКИ Створювати конвеєри ETL, конфігурації оркестрування, автоматизацію CI/CD, скрипти тощоАналізувати, організовувати таінтерпретувати необроблені дані, використовуючи сучасний стек данихСтворювати SQL-запити для ефективного маніпулювання данимиРобити внесок урозвиток інженерії даних табути лідером уцій галузі: Досліджувати технологічні тенденції тапроводити аналіз найкращих практик, щоб гарантувати, щонаші рішення залишаються нанайвищому рівніВИМОГИ Досвід побудови, обслуговування, тестування тавпровадження конвеєрів даних великого обсягуЕкспертиза ETL/ELT: Практичний досвід роботи щонайменше зодним рішенням повного циклу, атакож досвід його впровадження, розвитку таобслуговуванняГлибокі знання SQLДосвід татеоретичне розуміння моделювання даних таоптимізації баз данихЩонайменше 3роки досвіду роботи зPython/Scala для обробки таперетворення данихДосвід роботи зіSpark, закцентом наPySparkПрактичний досвід роботи зосновними фреймворками табібліотеками вобласті Data Engineering: Spark, Kafka, Airflow тоwith proven experience in troubleshooting and optimization Experience with cloud data processing solutions on AWS/Azure WILL BE ADVANTAGE: Experience with CI/CD in data engineering Experience with BI tools such as Tableau, Qlik, Grafana or similar Databricks experience/certification