Główny inżynier danych w EPAM Systems

OpisNasz klient to amerykańska firma zajmująca się grami wideo. ObowiązkiMigracja bieżących potoków danych i DAG z procedur przechowywanych GCP BigQuery do AWS RedshiftWykonywanie niezbędnych uzupełnień danych oraz sprawdzanie jakości i integralności podczas migracji i po migracjiProjektowanie, rozwijanie i utrzymywanie potoków danych przy użyciu usług AWS, takich jak Amazon Redshift (lub dowolne rozwiązanie MPP), Amazon S3, dbt i Apache AirflowWykorzystuj rozwiązania SQL i ETL/ELT do przekształcania i ładowania danych z różnych źródeł do hurtowni danych i jezior danychOptymalizuj przepływy pracy i procesy danych, aby zapewnić wydajność, skalowalność i niezawodnośćWdrażaj automatyczne aktualizacje mechanizmy zapewniające aktualność potoków danych i systemów za pomocą najnowszych danychWspółpraca z zespołami wielofunkcyjnymi w celu zrozumienia wymagań dotyczących danych i dostarczania rozwiązań spełniających potrzeby biznesoweMonitorowanie potoków danych i rozwiązywanie problemów w celu terminowego identyfikowania i rozwiązywania problemówPrzeprowadzanie ocen i analiz danych w celu zapewnia spostrzeżenia i rekomendacje dotyczące podejmowania decyzji w oparciu o daneWymaganiaPonad 5 lat doświadczenia jako inżynier danychZaawansowany SQL, PLSQL, TSQL do transformacji i optymalizacji danychDoświadczenie w pisaniu kodu ETL/ELT, zarządzaniu i wdrażaniu DAG przy użyciu DBT lub AirflowPraktyczne doświadczenie w pracy z AWS RedShift , jeśli nie, czy pracowałeś z podobnymi systemami Cloud EDW.Wyższy średniozaawansowany poziom języka angielskiego w mowie i piśmie (B2+)Miła znajomość Google Cloud Platform (GCP) i Google Cloud BigQuery do przechowywania i analizy danychZnajomość narzędzi migracji AWS do przenoszenia danych i obciążenia od Google Cloud Platform do AWSDoświadczenie w technikach analityki i oceny danych w celu oceny jakości, integralności i użyteczności danych Biegłość w metodologiach i narzędziach testowania BI do sprawdzania raportów i dashboardów Business Intelligence Znajomość inżynierii analityki danych ze szczególnym naciskiem na budowanie skalowalnych i wydajnych rozwiązań w zakresie danychWe OfertaKonkurencyjne wynagrodzenie uzależnione od doświadczenia i umiejętnościIndywidualna ścieżka karieryNieograniczony dostęp do rozwiązań edukacyjnych LinkedInZwolnienia lekarskie i regularne wakacjeZajęcia języka angielskiego z certyfikowanymi lektorami języka angielskiegoElastyczne godziny pracy Pokaż więcej Pokaż mniej Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології Галузі ІТ-послуги та ІТ Консалтинг