Główny inżynier danych w EPAM Systems, Inc.

Opis głównego inżyniera danych

Naszym klientem jest amerykańska firma produkująca gry wideo.

Obowiązki

• Migracja bieżących potoków danych i DAG z procedur przechowywanych GCP BigQuery do AWS Redshift
• Wykonuj niezbędne uzupełnianie danych oraz sprawdzaj jakość i integralność podczas migracji i po niej.
• Projektuj, rozwijaj i utrzymuj potoki danych, korzystając z usług AWS, takich jak Amazon Redshift (lub dowolne rozwiązanie MPP), Amazon S3, dbt i Apache Airflow
• Wykorzystaj rozwiązania SQL i ETL/ELT do przekształcania i ładowania danych z różnych źródeł do hurtowni danych i jezior danych
• Optymalizuj przepływy pracy i procesy danych, aby zapewnić wydajność, skalowalność, i niezawodność
• Wdrażaj mechanizmy automatycznej aktualizacji, aby potoki danych i systemy były aktualne przy użyciu najnowszych danych
• Współpracuj z zespołami interdyscyplinarnymi, aby zrozumieć wymagania dotyczące danych i dostarczać rozwiązania, które zaspokajać potrzeby biznesowe
• Monitoruj potoki danych i rozwiązuj problemy, aby identyfikować i rozwiązywać problemy w odpowiednim czasie
• Przeprowadzaj oceny i analizy danych, aby zapewnić spostrzeżenia i rekomendacje ułatwiające podejmowanie decyzji w oparciu o dane

Wymagania

• ponad 5 lat doświadczenia jako Inżynier Danych
• Zaawansowany SQL, PLSQL, TSQL do transformacji i optymalizacji danych
• Doświadczenie w pisaniu kodu ETL/ELT, zarządzaniu i wdrażaniu DAG przy użyciu DBT lub Airflow
• Praktyczne doświadczenie w pracy z AWS RedShift, jeśli nie, pracowałeś z podobnymi systemami Cloud EDW
• Poziom średniozaawansowany języka angielskiego w mowie i piśmie (B2+)

Mile widziana

• Znajomość Google Cloud Platform (GCP) i Google Cloud BigQuery do przechowywania i analityki danych
• Znajomość narzędzi migracyjnych AWS do przenoszenia danych i obciążeń z Google Cloud Platform do AWS
• Doświadczenie w zakresie technik analitycznych i oceny danych w celu oceny ich jakości, integralność i użyteczność
• Biegłość w zakresie metodologii testowania BI i narzędzi do sprawdzania raportów i dashboardów z zakresu analityki biznesowej
• Znajomość inżynierii analityki danych ze szczególnym naciskiem na budowanie skalowalnych i wydajnych rozwiązań w zakresie danych

Oferujemy

• Pracę według elastycznego grafiku zdalnie lub z dowolnego z naszych komfortowych biur lub przestrzeni coworkingowych na Ukrainie
• Otrzymaj niezbędny sprzęt do wykonywać swoje zadania zawodowe
• Zmieniaj projekty i stosy technologiczne w ramach EPAM
• Zdobądź doświadczenie w różnych obszarach biznesowych (ubezpieczenia, handel elektroniczny, opieka zdrowotna, finanse, podróżowanie, media, sztuczna inteligencja i więcej)
• Rozważ opcje relokacji w ponad 30 krajach na całym świecie
• Weź udział w programach wolontariackich, charytatywnych i społecznościach (zarówno technicznych, jak i opartych na zainteresowaniach)
• Możesz zaplanować indywidualną ścieżkę kariery wspólnie ze swoim menadżerem
• Otrzymuj regularne informacje zwrotne od współpracowników
• Bezpłatnie doskonal swój angielski pod okiem certyfikowanych nauczycieli (kluby mówienia, kursy przygotowujące do rozmowy kwalifikacyjnej z klientem itp.)
• Skorzystaj z możliwości odbycia bezpłatnych szkoleń i certyfikacji w zakresie AWS, GCP lub Azure Cgłośno
• Skorzystaj z wewnętrznego programu szkoleniowego e-learning (ponad 18 200 specjalistycznych programów szkoleniowych i mentorskich)
• Uzyskaj dostęp do kont firmowych w LinkedIn Learning, Get Abstract i innych zasobach partnerów
< li> Studiuj w szkole EPAM Solution Architecture School pod okiem instruktorów, którzy są praktykującymi architektami
• Rozwijaj się jako lider, dołącz do szkoły Delivery Management, Resource Management, Leadership Essentials i nie tylko
• Uczestniczyj w wewnętrznych społecznościach (ponad 500 spotkań, dyskusji technicznych, burz mózgów, wydarzeń i konferencji online rocznie)
• Urlopy i zwolnienia lekarskie (w tym zwolnienia lekarskie bez zaświadczenia lekarskiego)
• Szeroka oferta dobrowolnych Programy Ubezpieczenia Medycznego zapewniające zarówno opiekę medyczną, jak i różne opcje profilaktyczne (w tym zajęcia sportowe)
• Ubezpieczenie medyczne dla członków rodziny w stawkach korporacyjnych
• Wsparcie firmy podczas ważnych wydarzeń życiowych (poród lub adopcja, małżeństwo itp.)
• Wsparcie komfortu psychicznego: zniżki na usługi specjalistów lub trenerów zdrowia psychicznego, szkolenia tematyczne
• Program E-kids - bezpłatny program nauki języka programowania dla dzieci EPAMerów

EPAM stara się zapewnić swojemu globalnemu zespołowi ponad 52 800 specjalistów w ponad 55 krajach możliwości rozwoju zawodowego od pierwszego dnia współpracy. Źródłem sukcesu EPAM są nasi współpracownicy, dlatego cenimy współpracę, staramy się zawsze rozumieć biznes naszych klientów i dążymy do najwyższych standardów jakości. Bez względu na to, gdzie jesteś, dołączysz do oddanej, zróżnicowanej społeczności, która pomoże Ci w pełni wykorzystać Twój potencjał.