Inżynier danych w QAtronic

Przegląd projektu
Projekt jest inicjatywą transformacyjną mającą na celu integrację infrastruktury danych kin (JJ) z systemem Klienta nowoczesna architektura danych po przejęciu przez Klienta nowych kin w USA. Głównym celem projektu jest migracja istniejących danych z Databricks na platformę Snowflake, zapewnienie wysokiej jakości danych, niezawodności i
dostępności w celu ułatwienia zaawansowanej analityki i procesów decyzyjnych.

Podsumowanie roli:
 Jako inżynier danych w projekcie odegrasz kluczową rolę w projektowaniu i wdrażaniu solidnych potoków danych,
które skutecznie migrują istniejące teatry systemów danych do hurtowni danych Snowflake firmy ATG. Ta rola wymaga
głębokiej wiedzy technicznej w zakresie inżynierii danych, dużego doświadczenia w zakresie platform chmurowych, takich jak AWS, oraz biegłości w środowiskach Databricks i Snowflake.

Kluczowe obowiązki:
 Projektowanie, konstruowanie, instalowanie, testowanie i utrzymywanie wysoce skalowalnych systemów zarządzania danymi, zapewniających właściwą
integrację z architekturą chmurową Klienta.
 Wdrażanie procesów i systemy monitorowania jakości danych, zapewniające, że dane produkcyjne są zawsze dokładne i dostępne dla kluczowych interesariuszy.
 Twórz wysokowydajne algorytmy, prototypy, modele predykcyjne i weryfikacje koncepcji.
 Możliwości badawcze do pozyskiwania danych i nowych zastosowań istniejących danych.
 Opracuj procesy zbiorów danych do modelowania, eksploracji i produkcji danych.
 Integruj nowe technologie zarządzania danymi i narzędzia inżynierii oprogramowania z istniejącymi strukturami.
 Współpracuj z architektami danych, modelarzami i członkami zespołu IT nad celami projektu.
 Polecaj sposoby poprawy niezawodności, wydajności i jakości danych.

Niezbędne umiejętności i kwalifikacje:
 Rozległe doświadczenie z językami SQL i Python w zakresie złożonej manipulacji, transformacji i analizy danych.
 Biegła znajomość Databricks i Snowflake, z solidnym zrozumieniem wyzwań związanych z przejściem pomiędzy
te platformy.
 Duże doświadczenie z usługami chmurowymi AWS, w szczególności związanymi z obsługą danych (np. AWS Glue,
AWS Lambda i Amazon S3).
 Znajomość modelowanie danych, rozwój ETL i techniki hurtowni danych.
 Silne umiejętności analityczne i umiejętności rozwiązywania problemów.
 Doskonałe umiejętności komunikacji werbalnej i pisemnej, zdolne do jasnego wyrażania złożonych pomysłów technicznych
dla nie -interesariusze techniczni.
 Zdolność do kreatywnego rozwiązywania problemów i proaktywne podejście do identyfikowania wyzwań i stawiania im czoła.
 Doskonałe umiejętności komunikacyjne, zdolne do artykułowania złożonych koncepcji różnym odbiorcom, w tym menedżerom ds. przychodów i interesariuszom wyższego szczebla.< br/>  Umiejętność pracy zespołowej w dynamicznym środowisku zorientowanym na zespół, a także samodzielnej przy minimalnym nadzorze.

Pożądane umiejętności:
 Doświadczenie z DBT (narzędziem do budowania danych) do zarządzania przepływami pracy transformacji danych.
 Znajomość praktyk DevOps w odniesieniu do inżynierii danych, w tym integracji potoków CI/CD.

 Background w obsłudze projektów migracji danych na dużą skalę na różne platformy
)))) Znajomość branży rozrywkowej lub biletowej będzie dodatkowym atutem.

Cechy osobiste: