28 sierpnia 2024
Średni/starszy inżynier danych/programista ETL (ID:1293) віддалено Infopulse, część Tietoevry Create zaprasza utalentowanego profesjonalistę, aby dołączył do naszego rozwijającego się zespołu jako inżynier danych /programista ETL . Nasz klient to jedna z firm Wielkiej Czwórki świadczących usługi audytorskie, podatkowe, konsultingowe i finansowe. Obszary odpowiedzialności y Projektowanie, rozwijanie i utrzymywanie procesów ETL w celu obsługi integracji danych i
28 sierpnia 2024
Średni/starszy inżynier danych/programista ETL (ID:1293)
віддалено
Infopulse, część Tietoevry Create zaprasza utalentowanego profesjonalistę, aby dołączył do naszego rozwijającego się zespołu jako inżynier danych /programista ETL . Nasz klient to jedna z firm Wielkiej Czwórki świadczących usługi audytorskie, podatkowe, konsultingowe i finansowe.
Obszary odpowiedzialności y
- Projektowanie, rozwijanie i utrzymywanie procesów ETL w celu obsługi integracji danych i wymagań dotyczących raportowania
- Pracuj z Databricks, PySpark (Scala lub Python), aby tworzyć skalowalne i wydajne potoki danych
- Wykorzystaj Azure Data Factory do orkiestracji i automatyzacji przenoszenia i transformacji danych
- Pisz, optymalizuj i rozwiązuj złożone zapytania SQL dotyczące ekstrakcji, transformacji i ładowania danych
- Współpracuj z zespołami interdyscyplinarnymi, aby rozumieć wymagania dotyczące danych i dostarczać wysokiej jakości rozwiązania w zakresie danych
- li>
- Monitoruj i zapewniaj wydajność, niezawodność i skalowalność procesów ETL
Kwalifikacje
- Ponad 3 lata doświadczenia na stanowiskach związanych z programowaniem ETL lub inżynierią danych
- Duże doświadczenie z Databricks i Spark /Python
- Biegła znajomość Azure Data Factory i Azure Synapse
- Zaawansowane umiejętności SQL, w tym optymalizacja zapytań i dostrajanie wydajności
- Solidne zrozumienie koncepcji i najlepszych praktyk dotyczących hurtowni danych
- Silne umiejętności rozwiązywania problemów i dbałość o szczegóły
< li> Doskonałe umiejętności komunikacyjne połączone z umiejętnością współpracy w środowisku zespołowym
będą dodatkowym atutem
- Doświadczenie z platformami danych w chmurze (np. Azure, AWS)
- Znajomość praktyk zarządzania danymi i bezpieczeństwa
- Doświadczenie z systemami kontroli wersji, takimi jak Git
ul>