Inżynier danych w Profit.Store

Główne obowiązki:

• Rozwój, testowanie i optymalizacja procesów ETL dla nowych i istniejących projektów niestandardowych.
• Interakcja z analitykami i klientami biznesowymi w celu dokładnego zebrania wymagań technicznych.
li>
• Monitorowanie procesów przetwarzania danych, identyfikowanie i eliminowanie problemów z szybkością i dokładnością danych.
• Opracowywanie i wdrażanie standardów i najlepszych praktyk zapewniających jakość i niezawodność danych.

• Dogłębna znajomość statystyki i analizy matematycznej.
• Minimum 3 lata doświadczenia w tworzeniu i optymalizacji procesów ETL.
< li>Dogłębna znajomość SQL i Python, doświadczenie z relacyjnymi i nierelacyjnymi bazami danych.
• Doświadczenie z bibliotekami Pythona do manipulacji danymi, takimi jak Pandas, NumPy, SciPy i wizualizacją danych przy użyciu Looker Studio.
• Znajomość frameworków do pracy z big data w Pythonie takich jak PySpark lub Dask.
• Doświadczenie z narzędziami ETL takimi jak Informatica, Talend, DataStage lub SSIS.
• Umiejętność skutecznej komunikacji zarówno w aspektach technicznych, jak i pozatechnicznych.

Przyda się:

• Doświadczenie z hurtowniami danych i technologiami przetwarzania dużych zbiorów danych (np. Hadoop, Spark, Kafka).
• Konfigurowanie i utrzymywanie infrastruktury kontroli wersji (np. Git).
• Konfiguracja i obsługa konteneryzacji (Docker).