Inżynier danych (Centrum kompetencji danych) w Sigma Software

Inżynier danych (Data Competency Center) Київ, Львів, Дніпро, Одеса, Вінниця, Івано-Франківськ, Луцьк, Моршин, Чернівці Dołącz do atSigma Software, aby być na czele najciekawszych projektów i odgrywają kluczową rolę w rozwoju i sukcesie naszych inicjatyw i Centrum Kompetencji. KLIENT Weare poszukuje inżyniera danych, który nie tylko posiada dużą wiedzę specjalistyczną w zakresie inżynierii danych, ale jest również gotowy objąć rolę kierowcy, przyczyniając się do rozwoju Centrum kompetencji danych w Sigma Software. Poszukujemy osoby pasjonującej się przetwarzaniem danych, która bardzo pragnie rozwijać swoje umiejętności i wiedzę w tej dziedzinie. OBOWIĄZKI Tworzenie potoków ETL, konfiguracji orkiestracji, automatyzacji CI/CD, skryptów itp. Analizowanie, organizowanie i interpretowanie surowych danych przy użyciu nowoczesnego stosu danych Tworzenie zapytań SQL w celu wydajnego manipulowania danymi Przyczynianie się do doskonałości inżynierii danych i jej przewodnictwo: badanie trendów technologicznych i przeprowadzanie analiz najlepszych praktyk, aby zapewnić nasze rozwiązania pozostają najnowocześniejsze WYMAGANIA Biegłość w budowaniu, utrzymywaniu, testowaniu i dostarczaniu potoków danych na dużą skalę Wiedza ETL/ELT: Praktyczne doświadczenie z co najmniej jednym kompleksowym rozwiązaniem oraz jego uruchomieniem, rozwojem i utrzymaniem Silna wiedza ofSQL Doświadczenie i teoretyczne zrozumienie w modelowaniu danych i optymalizacji baz danych Co najmniej 3 lata biegłości w Pythonie/Scali do przetwarzania i transformacji danych Doświadczenie ze Spark, ze szczególnym uwzględnieniem PySpark Praktyczne doświadczenie z głównymi frameworkami i bibliotekami w domenach Data Engineering: Spark, Kafka, Airflow itp., z potwierdzonym doświadczeniem w debugowaniu i optymalizacji Doświadczenie z rozwiązaniami do przetwarzania danych w chmurze na AWS/Azure Doświadczenie/certyfikacja WOULDBE APLUS Databricks Doświadczenie w inżynierii danych CI/CD Doświadczenie z narzędziami BI, takimi jakTableau, Qlik, Grafana lub podobne Приєднуйся донас уSigma Software, щоб бути вцентрі ув agi найцікавіших проєктів тавідігравати ключову роль урозвитку тауспіху наших ініціатив таЦентру компетенці é. ЗАМОВНИК Мишукаємо Data Engineer, який нетільки має сильний досвід вінженерії даних, але йготовий взяти насе be роль лідера, сприяючи роботі нашого Центру компетенцій зобробки даних вSigma Software. Мишукаємо людину, яка захоплюється обробкою даних іпрагне розвивати свої навички тавдосконалювати зн annя вцій галузі. О_n'''''ки створювати конвеєри Etl, конфірї оркестłats інтеретувати необлені дані, використовючи счасний сек даних створюванula Робити внесок урозвиток інженерї даних табуи лдером цццй галззз: досліджвати технологчч тапровв więc аналзз найращих unkier, щоб гаранźni ння, тестуання таваровадження конвеєрі даних великого mięś шеннам повного цикbarów, аатакож до przykład його вRрровадженна, розвитку таобслуговуванubli глибоoń розуміння моделювання даних таоптимізації баз даних Щонайменше 3 роки досвіду роботи z Python/Scala для обро бкi transformacja danych Doświadczenie ze Spark, z naciskiem na PySpark Praktyczne doświadczenie z głównymi frameworkami i bibliotekami z zakresu Inżynierii Danych: Spark, Kafka, Airflow itp., poparte udokumentowanym doświadczeniem w rozwiązywaniu problemów i optymalizacji Doświadczenie z rozwiązaniami chmurowymi do przetwarzania danych na AWS/Azure BĘDZIE ATUTEM: Doświadczenie w CI/CD w inżynierii, doświadczenie w pracy z narzędziami BI takimi jak Tableau, Qlik, Grafana lub podobnymi, doświadczenie/certyfikat Databricks