Starszy inżynier danych (#1421) w N-iX

N-iX aktywnie poszukuje starszego inżyniera danych, który dołączy do naszego zespołu! Nasz klient jest jednym z największych operatorów niefranczyzowych centrów napraw powypadkowych i jednym z głównych operatorów sprzedaży detalicznej szyb samochodowych w Ameryce Północnej pod względem liczby lokalizacji i sprzedaży. Obecnie Firma posiada lokalizacje w Kanadzie i USA.

Zadania:

• Przeprowadzanie analizy istniejących systemów danych, identyfikacja obszarów wymagających ulepszeń i przedstawia zalecenia dotyczące ulepszeń architektury
• Opracuj modele danych, przepływy danych i strategie integracji danych, aby zapewnić płynne i wydajne zarządzanie danymi w różnych systemach i platformach
• Zapewnij wskazówki i wiedzę techniczną zespoły programistów we wdrażaniu rozwiązań w zakresie danych, zapewniając zgodność z najlepszymi praktykami i standardami branżowymi
• Przeprowadzaj profilowanie danych, oceny jakości danych i działania związane z zarządzaniem danymi, aby zapewnić dokładność, integralność i bezpieczeństwo danych
• Współpracuj z badaczami danych i analitykami, aby umożliwić analitykę i spostrzeżenia oparte na danych poprzez wdrożenie odpowiednich struktur i algorytmów danych
• Bądź na bieżąco z pojawiającymi się trendami, technologiami i najlepszymi praktykami branżowymi w zakresie architektury danych, analityka i przetwarzanie w chmurze
• Dostarczanie strategicznych rekomendacji i wskazówek dotyczących inicjatyw związanych z danymi.
• Komunikowanie się z wewnętrznymi właścicielami produktów, interesariuszami i dostawcami zewnętrznymi

• ponad 6 lat doświadczenia w pracy z platformami danych dla przedsiębiorstw, budowaniu jezior danych i zarządzaniu nimi oraz korzystaniu z technologii dużych zbiorów danych
• Ponad 5 lat doświadczenia w pracy z relacyjnymi i nierelacyjnymi bazami danych /NoSQL, zaawansowana znajomość SQL
• Ponad 4 lata doświadczenia w pracy z platformą AWS. Doświadczenie w tworzeniu rozwiązań w infrastrukturze AWS z wykorzystaniem usług takich jak AWS IAM, S3, API Gateway, Lambda, Glue, Lake Formation, Redshift, DynamoDB, RDS
• Ponad 4 lata doświadczenia w używaniu Pythona do inżynierii danych i tworzenia zaawansowanych rozwiązań wydajność i skalowalny potok danych
• Ponad 2 lata doświadczenia w pracy z Apache Airflow w celu orkiestracji obciążeń analitycznych
• Ponad 2 lata doświadczenia w rozwiązaniach IaC, takich jak terraform i tworzenie chmur
< li>Dogłębne zrozumienie pojęć związanych z hurtownią danych, BI, bezpieczeństwem danych, jakością danych i profilowaniem
• Wcześniejsze doświadczenie z tradycyjnymi narzędziami ETL, takimi jak Talend Open Studio, Informatica, Pentaho lub czymś podobnym
• Wcześniejsze doświadczenie w pracy w środowisku opartym na serwerze SQL i korzystaniu z technologii takich jak SSIS, TSQL, SSRS, .Net, C#
• Musisz grać zespołowo i być otwartym na pracę z nowszymi technologiami, a także na obsługę starszych systemów
• Pewna znajomość metodologii Agile
• Wyższy średniozaawansowany poziom języka angielskiego

Miło mieć:

• Doświadczenie w usłudze AWS EKS, konfigurowaniu klastrów Kubernetes i zarządzaniu nimi
• Doświadczenie w Cloud DevOps z wykorzystaniem produktów takich jak Gitlab, Bitbucket lub podobnych
• Dobre zrozumienie i doświadczenie w pracy z różnedostarczamy produkty z ekosystemu big data, takie jak Spark, EMR, Hive, Presto, bazy danych NoSQL, takie jak DynamoDB, MongoDB