Starszy inżynier danych w Abto Software

Poszukujemy utalentowanego i oddanego starszego inżyniera danych, który dołączy do naszego zespołu. Idealny kandydat będzie odgrywał kluczową rolę w kształtowaniu naszej architektury danych, integrowaniu różnorodnych źródeł danych i zapewnianiu, że nasze potoki danych będą skalowalne, solidne i aktualne. Dzięki dogłębnej znajomości nowoczesnych technologii stosów danych będziesz na czele naszych wysiłków mających na celu wspieranie naszych inicjatyw w zakresie analityki, uczenia maszynowego i inteligencji biznesowej. Podstawowe obowiązki Projektowanie, konstruowanie, instalowanie i konserwacja rurociągów przetwarzania danych na dużą skalę i innych infrastruktury. Ustal strategię danych poprzez wybór, architekturę i integrację najnowocześniejszych rozwiązań bazodanowych. Buduj, optymalizuj i utrzymuj procesy ETL/ELT przy użyciu nowoczesnych narzędzi i platform. Zapewnij integrację danych z różnych źródeł, mając na uwadze dokładność danych, niezawodność, i aktualność. Optymalizuj operacje baz danych w celu uzyskania maksymalnej wydajności, w tym monitoruj, rozwiązuj problemy i ulepszaj istniejące systemy. Współpracuj z analitykami danych, inżynierami ML i innymi zainteresowanymi stronami, aby wspierać ich potrzeby w zakresie infrastruktury danych. Współpracuj z innymi zespołami technicznymi w celu wyodrębniania, przekształcania i ładowania dane z wielu różnych źródeł danych.Wdrażaj środki bezpieczeństwa, aby zapewnić ochronę danych oraz zgodność z odpowiednimi przepisami i najlepszymi praktykami.Bądź na bieżąco z najnowszymi trendami technologicznymi, oceniając i wdrażając nowe systemy i narzędzia w miarę potrzeb.Kompetencje twarde: Licencjat/magister z informatyki, inżynierii lub pokrewnej dziedziny technicznej. Ponad 7 lat doświadczenia na stanowisku inżyniera danych. Ponad 7 lat doświadczenia z platformami hurtowni danych w chmurze, takimi jak Redshift lub BigQuery. Ponad 4 lata doświadczenia z platformami do orkiestracji danych, takimi jak Airflow, Prefect lub Dagster. Ponad 3 lata doświadczenia w projektowaniu i budowaniu rozwiązań Big Data w chmurze, szczególnie tych, które wykorzystują technologie Data Lakehouse, ze szczególnym uwzględnieniem optymalizacji wydajności i partycjonowania. Ponad 2 lata doświadczenia w frameworku przepływu pracy transformacji, takim jak dbt lub SQLMesh. Duża wiedza i doświadczenie w zakresie jezior danych, delta Lakes i domów Data Lake. Dobra znajomość SQL i języków skryptowych (Python, Scala, Java itp.). Dobra znajomość strategii hurtowni danych, w tym Inmon, Kimball i Data Vault. Doświadczenie w zakresie jakości danych, najlepiej przy użyciu frameworka takiego jak Great Hopetions. Doświadczenie w sektorze opieki zdrowotnej lub zdrowia behawioralnego. Sprawdzona ścieżka doświadczenie w projektowaniu i wdrażaniu wielkoskalowej infrastruktury danych. Nasze świadczenia: Promocja zawodowa i rozwój kariery; Konkurencyjne wynagrodzenie; Płatne urlopy i zwolnienia lekarskie; Wewnętrzny Program Medyczny; Program dla weteranów (obejmujący opiekę mentorską, dostępny gabinet dla osób niepełnosprawnych, obsługę prawną wsparcie i dodatkowe świadczenia);Elastyczne godziny pracy;Regularne działania społeczne firmy;Regularne szkolenia techniczne w naszym biurze;Kursy języka angielskiego;Siłownia itp. Pokaż więcej Pokaż mniej Посадовий рівень Старший середній рівеньRodzaj zatrudnienia Pełny etat Zakres obowiązków Branże informatyczne Tworzenie oprogramowania