Inżynier Big Data (Polska) w UST Ukraine

Inżynier Big Data (Polska)

віддалено

Nasz klient poszukuje starszego inżyniera Big Data, który dołączy do zespołu wdrażającego i wspierającego analitykę brzegową rozwiązania w ekosystemie Google Cloud. Znajdziesz świetne miejsce do pracy, jeśli pasjonujesz się projektowaniem zadań związanych z pozyskiwaniem danych, poznawaniem nowych technologii oraz proponowaniem i wdrażaniem nowych technologii.

LOKALIZACJA kandydata: Polska

Obowiązki:

• Ekstrakcja, przekształcanie i ładowanie danych z wielu źródeł i wielu formatów przy użyciu technologii Big Data.
• Tworzenie, ulepszanie i obsługa zadań pozyskiwania danych z różnych systemów źródłowych zgodnie z istniejącymi wzorcami projektowymi przy użyciu usług GCP, takich jak Apache Spark, Dataproc, Dataflow, BigQuery, Airflow itp.
• Pracuj między zespołami i starszymi inżynierami, aby dane były bardziej dostępne dla innych osób w organizacji.
• Modyfikuj potoki ekstrakcji danych w kierunku standardowych metod, które mogą być powtarzalne i wielokrotnego użytku przy minimalnym nadzorze ze strony starszych inżynierów.
• Automatyzacja ręcznych procesów, optymalizacja dostarczania danych, przeprojektowanie infrastruktury w celu uzyskania większej skalowalności itp.
• Ściśle współpracuj ze starszymi inżynierami, aby optymalizować techniki zapytań i dostępu do danych.
• Stosuj nowoczesne praktyki tworzenia oprogramowania (obsługa bezserwerowa, architektura mikrousług, CI/CD, infrastruktura jako kod itp.)
• Dołącz do zgranego zespołu inżynierów stosującego zwinne oprogramowanie praktyki rozwojowe.

Wymagania:

• tytuł licencjata w dziedzinie informatyki, inżynierii systemów lub równoważne doświadczenie.
• Ponad 5 lat doświadczenia jako inżynier Big Data.
• Ponad 3 lata doświadczenia w korzystaniu z technologii takich jak Apache Spark, Hive, HDFS i Beam.
• Doświadczenie w pracy z Dataflow, Dataproc, kompozytorem i strumieniem danych.
• Ponad 3 lata doświadczenia w SQL, Scali lub Pythonie.
• Ponad 2 lata doświadczenia w pracy z narzędziami do zarządzania tworzeniem oprogramowania, takimi jak Maven czy Gradle.
• Ponad 2 lata doświadczenia w pracy z technologiami chmurowymi, takimi jak GCP, AWS lub Azure.

będzie plusem:

• Inżynieria danych z wykorzystaniem technologii GCP (BigQuery, DataProc, Dataflow, Composer, DataStream itp.) )
• Samodzielny, który identyfikuje zmiany priorytetów i reaguje na nie przy minimalnym nadzorze
• Systemy zarządzania kontrolą kodu źródłowego (np. SVN/Git, Github) i narzędzia do tworzenia takich jak Maven i Gradle.
• Środowiska zwinne (np. Scrum, XP)
• Relacyjne bazy danych (np. SQL Server, Oracle, MySQL)
• Narzędzia Atlassian (np. JIRA, Confluence i Github )

Oferujemy:

• Elastyczny grafik i możliwość pracy zdalnej (8-godzinny dzień pracy).
• Przyjazny, profesjonalny personel i ciepła atmosfera.
• Środowisko, w którym możesz realizować swoje pomysły.
• Płatne urlopy i zwolnienia lekarskie.
• Ubezpieczenie medyczne.
• Możliwość pracy zdalnej.
• Udział w działaniach edukacyjnych i konferencjach tematycznych.
• Imprezy zespołowe i imprezy firmowe.