Średni/starszy inżynier danych w Onseo

7 września 2024 r

Średni/Starszy Inżynier Danych

Kijów, Winnica, zdalnie

Poszukujemy doświadczonego Inżyniera Danych , co pomoże ulepszyć produkt naszego amerykańskiego partnera. Produkt ten od kilku lat z powodzeniem zapewnia klientom możliwość planowania różnorodnych wydarzeń, zajęć sportowych i czasu wolnego za pomocą specjalistycznej platformy technologicznej.

Wymagania:

• ponad 3 lata doświadczenia w inżynierii danych i budowaniu b> przechowywanie danych ;
• Doświadczenie w gromadzeniu dużych, złożonych zbiorów danych spełniających funkcjonalne/niefunkcjonalne wymagania biznesowe;
• Doświadczenie we wspieraniu optymalnej architektury potoku danych;
• Doskonała umiejętność programowania w Pythonie ;
• Głębokie doświadczenie w zapytaniach SQL ;
• Doświadczenie w projektowaniu i optymalizacji baz danych;
• Praktyczne doświadczenie z technologiami big data (na przykład Spark, Hadoop );
• Doświadczenie z PySpark do przetwarzania dużych zbiorów danych;
• Doświadczenie w analizie, przekształcaniu i przechowywaniu danych w określonych formatach w środowiskach big data;
• Zrozumienie podstaw przetwarzania rozproszonego;
• Doświadczenie w zakresie usług danych AWS i zarządzania infrastrukturą;
• Doświadczenie z AWS Lambda, Glue, RedShift, S3 ;
• Angielski na poziomie nie niższym niż Upper Intermediate (konwersacja obowiązkowa).

będzie dodatkowym atutem:

• Doświadczenie z PowerBI;
• Doświadczenie z Apache Airflow/MWAA , tworzeniem DAG przepływu pracy i planowaniem zadań.

Kluczowe obowiązki:

• Wdrażanie i utrzymanie hurtowni danych;
• Wdrożenie potoków ETL do napełniania hurtowni danymi z różnych hurtowni/API z gwarancją spójności danych;
• Wdrożenie narzędzi do standardowych żądań danych wewnętrznych i zewnętrznych w różnych formatach i lokalizacjach;
• Podział złożonych zadań na zadania wykonalne;
• Monitorowanie wydajności systemów w celu zapewnienia, że ​​spójność danych i opóźnienia spełniają wymagania produktu.

Oferujemy:

• Przyjazny i wysoce profesjonalny zespół, demokratyczne zarządzanie;
• Rozwój zawodowy i szkolenia;
• Planowanie kariery i regularne oceny wyników;
• Konkurencyjne wynagrodzenie;
• Ubezpieczenie medyczne i płatne zwolnienia lekarskie;
• Praca długoterminowa z 24 dniami kalendarzowymi płatnego urlopu;
• Rekompensata sportowa i lekcje języka angielskiego;
• Pracuj nad ciekawymi projektami z wykorzystaniem zaawansowanych technologii.

PL

Poszukujemy średniego/starszego inżyniera danych który dołączy do zespołu programistów, aby pomóc ulepszyć produkt naszego amerykańskiego klienta. Produkt ten od lat z sukcesem zapewnia klientom usługę planowania różnorodnych wydarzeń, zajęć sportowych i rekreacyjnych za pomocą specjalistycznej platformy.

Wymagania:

• 3+ lata doświadczenia w inżynierii danych i budowaniu hurtowni danych;
• Gromadź duże, złożone zbiory danych, które spełniają funkcjonalne /niefunkcjonalne wymagania biznesowe.
• Utrzymuj optymalną architekturę potoku danych ;
• Biegłość w programowaniu  w języku Python ;
• Dobra umiejętność wykonywania zapytań SQL ;
• Doświadczenie w projektowaniu i optymalizacji baz danych;
• Praktyczne doświadczenie z technologiami big data (np. Spark, Hadoop) ;
• Doświadczenie z PySpark do przetwarzania dużych zbiorów danych;
• Doświadczenie w parsowaniu, przekształcaniu i przechowywaniu danych w tych formatach w środowiskach dużych zbiorów danych;
• Zrozumienie zasad przetwarzania rozproszonego;
• Doświadczenie w zakresie usług danych AWS i zarządzania infrastrukturą;
• Biegłość w AWS Lambda, Glue, RedShift, S3;
• Wyższy średniozaawansowany poziom języka angielskiego.

Dodatkowym atutem będzie:

• Doświadczenie z PowerBI;
• Doświadczenie z Apache Airflow/MWAA , tworzenie DAG-ów przepływu pracy i planowanie zadań.

Rola Obowiązki:

• Wdrażanie i wspieranie hurtowni danych;
• Implementuj potoki ETL, aby wypełniać hurtownię danych danymi z różnych magazynów/interfejsów API, gwarantując spójność danych;
• Wdrożyć narzędzia do ustandaryzowanego wewnętrznego i zewnętrznego przeszukiwania danych w różnych formatach i miejscach;
• Podziel złożone problemy na wykonywalne zadania;
• Monitoruj wydajność systemu, upewnij się, że spójność danych i opóźnienie aktualizacji spełniają wymagania produktu.

Oferujemy:

• Przyjazny i wysoce profesjonalny zespół;
• Zarządzanie demokratyczne;
• Rozwój zawodowy i szkolenia;
• Planowanie kariery i regularne oceny wyników;
• Konkurencyjne wynagrodzenie;
• Zwolnienie lekarskie i płatne dni chorobowe;
• Długoterminowe zatrudnienie z 24 dniami kalendarzowymi płatnego urlopu;
• Rekompensata sportowa i lekcje języka angielskiego;
• Pracuj nad ciekawymi projektami z wykorzystaniem najnowocześniejszych technologii.

Надсилаючи своє резюме, Ви тим самим даєте згоду на обробку своїх особистих персональних даних відповідно до Закону України «Про захист персональних даних» від 01.06.2010 р. № 2297-VІ з метою потенційної подальшої співпраці.