Starszy inżynier danych w GlobalLogic

Będziesz częścią zespołu opracowującego narzędzia do współpracy cyfrowej z funkcjami umożliwiającymi komunikację analogową na cyfrową. Będziesz pracować dla bardzo znanej marki. Obecnie koncentrujemy się na aplikacjach stworzonych do użytku w Microsoft Teams oraz aplikacjach mobilnych na iOS/Android. Rejestr produktów obejmuje szeroki zakres technologii i potrzeb biznesowych. W tym roku koncentrujemy się na globalnej skalowalności, zgodności i nowych funkcjach UX. Produkt składa się w całości z Azure Technology Stack i repozytoriów kodu GitHub i działa w oparciu o procesy Agile Scrum. To najważniejsza inicjatywa cyfrowa dla firmy i fajny zespół do pracy! Wymagania: Minimalne wymagania: - Minimum 4 lata doświadczenia w językach programowania SQL i Python, szczególnie do zadań związanych z inżynierią danych. - Biegłość w pracy z technologiami chmurowymi takimi jak jak Azure lub AWS.- Doświadczenie ze Spark i Databricks lub podobnymi platformami do przetwarzania i analityki dużych zbiorów danych.- Doświadczenie w pracy ze środowiskami dużych zbiorów danych, w tym przetwarzaniem danych, integracją danych i hurtownią danych.- Doświadczenie w technikach oceny i poprawy jakości danych, w tym danych. profilowanie, czyszczenie danych i weryfikacja danych.- Znajomość jezior danych i powiązanych z nimi technologii, takich jak Azure Data Lake Storage, AWS S3 lub Delta Lake, w celu skalowalnego i ekonomicznego przechowywania danych i zarządzania nimi.- Doświadczenie z bazami danych NoSQL, takich jak MongoDB lub Cosmos, do obsługi danych nieustrukturyzowanych i częściowo ustrukturyzowanych.Dodatkowe umiejętności (miło mieć):- Znajomość metodologii Agile i Scrum, w tym praca z Azure DevOps i Jira do zarządzania projektami.- Znajomość metodologii i praktyk DevOps, w tym ciągła integracja i ciągłe wdrażanie (CI/CD).- Doświadczenie z Azure Data Factory lub podobnymi narzędziami do integracji danych w celu orkiestracji i automatyzacji potoków danych.- Umiejętność tworzenia i utrzymywania interfejsów API do integracji i wykorzystania danych.- Doświadczenie z backendami danych dla oprogramowania platform, w tym projektowanie, optymalizacja i dostrajanie wydajności baz danych. Obowiązki: - Odpowiedzialny za budowanie, wdrażanie i utrzymanie rozwiązań analitycznych o znaczeniu krytycznym, które szybko przetwarzają dane w skali Big Data - Odpowiedzialny za projektowanie i wdrażanie potoków integracji danych - Współtworzy projekt, kod, konfiguracje i dokumentację komponentów zarządzających pozyskiwaniem danych, przesyłaniem strumieniowym w czasie rzeczywistym, przetwarzaniem wsadowym, ekstrakcją danych, transformacją i ładowaniem do wielu magazynów danych - Weź udział w pełnym cyklu opracowywania funkcji (analiza wymagań, dekompozycja, projektowanie itp.) - Projektuj, opracowuj i wdrażaj różne rozwiązania internetowe i zaplecza wraz z innymi utalentowanymi inżynierami w środowisku zespołowym współpracy. - Przyczyniaj się do ogólnej jakości usług programistycznych poprzez burzę mózgów, testy jednostkowe i proaktywne oferowanie różnych ulepszenia i innowacje.