Starszy inżynier danych w EPAM Systems, Inc.

Opis starszego inżyniera danych

Poszukujemy doświadczonego starszego inżyniera danych , który dołączy do naszego zespołu.

Projekt zakłada opracowanie i optymalizację nowej Platformy Danych w celu dostosowania naszego obecnego systemu przetwarzania danych. Starszy inżynier danych będzie odpowiedzialny za zaprojektowanie, wdrożenie i utrzymanie platformy w celu zaspokojenia potrzeb biznesowych w zakresie danych.

Opcja zdalna dotyczy wyłącznie Kandydatów, którzy będą pracować z dowolnego miejsca na Ukrainie.

Obowiązki

• Opracowywanie potoków przetwarzania danych przy użyciu Azure Data Factory i Azure Functions
• Wdrażaj procesy pozyskiwania i transformacji danych przy użyciu Databricks i PySpark
• Napisz wydajny kod w Pythonie i SQL, aby wyodrębniać, przekształcać i ładować dane
• Współpracuj z interesariuszami w celu gromadzenia wymagań i upewnij się, że platforma spełnia potrzeby biznesowe
• Monitoruj i rozwiązuj problemy z wydajnością platformy oraz rozwiązuj wszelkie problemy
• Wdrażaj środki zapewnienia jakości danych i ulepszenia procesów
• Optymalizuj przechowywanie i pobieranie danych operacje
• Przeprowadzaj analizę danych i generuj spostrzeżenia, które pomogą w podejmowaniu decyzji
• Szkol i mentoruj młodszych inżynierów danych
• Weź udział w przeglądach kodu partnerskiego i wspólnych działaniach zespołowych

Wymagania

• Ponad 3 lata praktycznego doświadczenia w dziedzinie dużych zbiorów danych i wiedza specjalistyczna w zakresie inżynierii oprogramowania danych
• Duża wiedza i doświadczenie z Azure Data Factory, Azure Functions i Databricks
• Biegłość w PySpark, Python i SQL
• Zrozumienie przetwarzania wsadowego i zasad ETL w hurtowniach danych
• Doświadczenie z sygnałami i orkiestracją kompletności danych
• Znajomość migracji schematów i ewolucji zbiorów danych
• Znajomość podejść do ponownego przetwarzania danych historycznych i poprawiania danych
• Dobre umiejętności rozwiązywania problemów i komunikacji
• Biegła znajomość języka angielskiego na poziomie B2+, dobra znajomość języka angielskiego

Miło jest mieć

• Znajomość Microsoft Power BI
• Kompetencje w zakresie Azure Blob Storage, Azure File Storage

Oferujemy

• Pracę zdalną według elastycznego harmonogramu lub w dowolnym z naszych wygodnych biur lub przestrzenie coworkingowe na Ukrainie
• Zdobądź niezbędny sprzęt do wykonywania swoich zadań zawodowych
• Zmień projekty i stosy technologiczne w ramach EPAM
• Zdobądź doświadczenie w różnych obszarach biznesowych (Ubezpieczenia, Handel elektroniczny, opieka zdrowotna, finanse, podróże, media, sztuczna inteligencja i nie tylko)
• Rozważ opcje relokacji w ponad 30 krajach na całym świecie
• Weź udział w programach wolontariackich, charytatywnych i społecznościach (zarówno techniczne i oparte na zainteresowaniach)
• Wspólnie ze swoim menadżerem możesz zaplanować indywidualną ścieżkę kariery
• Otrzymuj regularne informacje zwrotne od współpracowników
• Udoskonalaj swój angielski bezpłatnie dzięki certyfikatom nauczyciele (Kluby mówienia, kursy przygotowujące do rozmowy z klientem itp.))
• Skorzystaj z możliwości odbycia bezpłatnych szkoleń i certyfikacji w AWS, GCP lub Azure Clouds
• Skorzystaj z wewnętrznego programu szkoleniowego E-learn (ponad 18 200 specjalistycznych programów szkoleniowych i mentoringowych)< /li>
• Uzyskaj dostęp do kont firmowych w LinkedIn Learning, Get Abstract i innych zasobach partnerów
• Studiuj w EPAM Solution Architecture School pod okiem instruktorów, którzy są praktykującymi architektami
• Rozwijaj się jako lider , dołącz do szkoły zarządzania dostawami, zarządzania zasobami, szkoły Leadership Essentials i nie tylko
• Weź udział w społecznościach wewnętrznych (ponad 500 spotkań, dyskusji technicznych, sesji burzy mózgów, wydarzeń i konferencji online rocznie)
• Wakacje i zwolnienie lekarskie (w tym zwolnienie lekarskie bez zaświadczeń lekarskich)
• Szeroka oferta programów Dobrowolnego Ubezpieczenia Medycznego zapewniająca zarówno leczenie, jak i różnorodne opcje profilaktyczne (w tym zajęcia sportowe)
• Ubezpieczenie medyczne dla członkowie rodziny według stawek korporacyjnych
• Wsparcie firmy podczas ważnych wydarzeń życiowych (poród lub adopcja, małżeństwo itp.)
• Wsparcie komfortu psychicznego: zniżki na usługi specjalistów lub trenerów zdrowia psychicznego, szkolenia tematyczne
• Program E-kids - bezpłatny program szkolenia w zakresie języka programowania dla dzieci EPAMerów

EPAM stara się zapewnić swojemu globalnemu zespołowi ponad 52 800 specjalistów w ponad 55 krajów z możliwościami rozwoju zawodowego od pierwszego dnia współpracy. Źródłem sukcesu EPAM są nasi współpracownicy, dlatego cenimy współpracę, staramy się zawsze rozumieć biznes naszych klientów i dążymy do najwyższych standardów jakości. Bez względu na to, gdzie jesteś, dołączysz do oddanej, zróżnicowanej społeczności, która pomoże Ci w pełni wykorzystać Twój potencjał.