Inżynier danych platformy Azure w Lingarogroup

Poszukujemy doświadczonego inżyniera danych w chmurze, biegle posługującego się Azure i Databricks. Idealny kandydat będzie miał praktyczne doświadczenie w projektowaniu i wdrażaniu potoków danych, rozwiązań hurtowni danych i przepływów pracy ETL, więc jeśli odpowiada to Twojemu doświadczeniu, nie wahaj się Apply!Zadania:- Projektowanie i wdrażanie systemów przetwarzania danych na platformie Azure. Obejmuje to pisanie wydajnego i skalowalnego kodu do przetwarzania, przekształcania i czyszczenia dużych ilości ustrukturyzowanych i nieustrukturyzowanych danych. - Budowanie potoków danych w celu pozyskiwania danych z różnych źródeł, takich jak bazy danych, interfejsy API lub platformy strumieniowe. - Integrowanie i przekształcanie danych w celu zapewnienia ich zgodność z docelowym modelem lub formatem danych.- Praktyczne doświadczenie w projektowaniu i optymalizacji przechowywania danych (jeziora danych, hurtownie danych, rozproszone systemy plików).- Znajomość partycjonowania, kompresji, optymalizacji przechowywania i wyszukiwania danych.- Identyfikacja i odzyskiwanie danych. rozwiązywanie wąskich gardeł, dostrajanie zapytań i wdrażanie strategii buforowania w celu zwiększenia szybkości pobierania danych i ogólnej wydajności systemu.- Współpraca z zespołami wielofunkcyjnymi, w tym analitykami danych, analitykami i interesariuszami biznesowymi, aby zrozumieć ich wymagania i zapewnić rozwiązania techniczne.- Niezależność i odpowiedzialność w dostarczanie rozwiązań.- Umiejętność pracy w metodykach zwinnych.Wymagania: - Udokumentowane doświadczenie w infrastrukturze chmurowej Azure, Databricks oraz wdrożeniu SQL (np. Oracle, T-SQL, MySQL itp.).- Co najmniej 4 lata doświadczenia doświadczenie w obszarze Data&Analytics - Bardzo dobry poziom komunikacji, w tym umiejętność jasnego i konkretnego przekazywania informacji współpracownikom i interesariuszom biznesowym. - Doświadczenie w pracy w metodykach zwinnych – narzędzia wspierające (JIRA, Azure DevOps). - Język angielski co najmniej na poziomie B2, idealnie C1.- Doświadczenie lub znajomość innych technologii chmurowych, hurtowni danych, zarządzania danymi i analizy biznesowej będzie dodatkowym atutem. Mile widziane:- Znajomość języka Python- Umiejętności programowania do analizy danych (szczególnie PySpark, SparkSQL)