Старший інженер даних (Azure) @ GetInData | Частина Xebia в GetInData | Part of Xebia

Роль інженера з обробки даних передбачає проектування, створення та підтримку архітектури даних, інструментів і процедур, які сприяють збиранню, зберіганню, обробці та аналізу значних обсягів даних в організації. Ця посада передбачає створення платформ даних на основі стандартної інфраструктури та встановлення спрощеного шляху для інженерів Analytics, які покладаються на систему. Знання такої мови програмування, як Python / Scala або Java Знання платформ Lakehouse - Databricks Досвід роботи з системами обміну повідомленнями - Kafka Знайомство з системами контролю версій, зокрема GIT Досвід як програміста та знання розробки програмного забезпечення, хороших принципів, практик та рішень Розширений досвід роботи з Microsoft Azure Знання принаймні одного інструменту оркестровки та планування, наприклад Airflow, Azure Data Factory, Prefect, Dagster Знайомство з практиками та інструментами DevOps, включаючи Docker, Terraform, CI/CD, Azure DevOps Здатність брати активну участь/керувати обговорення з клієнтами для виявлення та оцінки конкретних і амбітних шляхів удосконалення. Роль інженера з обробки даних передбачає проектування, побудову та підтримку архітектури даних, інструментів і процедур, що сприяють збору, зберіганню, маніпулюванню та аналізу значних обсягів даних в організації. Ця посада передбачає створення платформ даних на основі стандартної інфраструктури та встановлення спрощеного шляху для інженерів Analytics, які покладаються на систему. ,[Спільна робота з інженерами платформи для оцінки та вибору найбільш прийнятних технологій та інструментів для проекту, розробка та впровадження нових функцій і інструментів з відкритим кодом, виконання складних процедур збору даних, впровадження та впровадження політики відповідно до стратегічних планів компанії. щодо використовуваних технологій, організації роботи тощо, забезпечення дотримання галузевих стандартів і правил щодо безпеки, конфіденційності даних, що застосовуються на рівні обробки даних, проведення навчання та обмін знаннями] Вимоги: Python, Databricks, Kafka, Git, Airflow, Docker, Terraform, CI/CD, Microsoft Azure, інструменти Azure DevOps: Jira, GitLab, GIT, Jenkins/GitLab, Agile. Додатково: спортивний абонемент, приватне медичне обслуговування, плоска структура, невеликі команди, міжнародні проекти, командні заходи, бюджет тренувань, безкоштовна кава, тренажерний зал, паркування велосипедів, ігрова кімната, безкоштовні закуски, безкоштовні напої, внутрішні тренінги, стартова атмосфера, без дрес-коду , Кухня.