Starszy inżynier danych || Inżynier Big Data w globalnej rekrutacji DCV w DCV Global Recruitment

Starszy inżynier danych: doświadczenie w Scala, Python lub Java i środowisku lokalnym Unix/Linux Doświadczenie w tworzeniu interfejsów API RESTful przy użyciu Java Spring Boot Praktyczne doświadczenie w budowaniu potoków danych przy użyciu komponentów Hadoop (Apache Hadoop, Scala, Apache Spark, YARN, Hive , SQL) Doświadczenie w optymalizacji zadań Spark Doświadczenie z bazami danych opartymi na szeregach czasowych/analitycznych, takich jak Elasticsearch Doświadczenie ze standardowymi w branży narzędziami do kontroli wersji (Git, GitHub) i narzędziami do automatycznego wdrażania (Ansible i Jenkins) Podstawowa znajomość skryptów powłoki Zrozumienie technik modelowania dużych zbiorów danych używanie technik relacyjnych i nierelacyjnych Musi być osobą samodzielną, proaktywną i nastawioną na zespół Chęć uczenia się i szybkiego dostosowywania się do zmieniających się wymagań Doświadczenie i zrozumienie SDLC (cyklu rozwoju oprogramowania) Warto mieć: Tworzenie/aktualizowanie/ Utrzymanie współdzielonej biblioteki Jenkins Znajomość lub doświadczenie wzorców projektowych w chmurze Świetne umiejętności komunikacyjne Inżynier Big Data (Hadoop) Doświadczenie w środowisku Python, pySpark i Unix/Linux lokalnie Praktyczne doświadczenie w budowaniu potoków danych przy użyciu komponentów Hadoop (Apache Hadoop, Apache Spark, YARN, Hive, SQL) Doświadczenie ze standardowymi w branży narzędziami do kontroli wersji (Git, GitHub) i narzędziami do zautomatyzowanego wdrażania (Ansible i Jenkins) Doświadczenie w optymalizacji zadań Spark Podstawowa znajomość skryptów powłoki Zrozumienie technik modelowania dużych zbiorów danych przy użyciu technik relacyjnych i nierelacyjnych Potrzeby być osobą samodzielną, proaktywną i nastawioną na zespół. Chęć uczenia się i szybkie dostosowywanie się do zmieniających się wymagań. Doświadczenie i zrozumienie SDLC (cyklu życia oprogramowania) Umiejętność pracy z użytkownikami biznesowymi i interesariuszami zespołu, takimi jak kierownicy projektów i architekci. Doskonałe umiejętności analizy danych poparte doświadczeniem w pracy z dużymi i złożonymi zbiorami danych. Dobra znajomość Structured Query Language (SQL). Wysoce analityczny, z doskonałą dbałością o szczegóły. Posiada doświadczenie w analizie wymagań biznesowych i przekształcaniu ich w skuteczne rozwiązania funkcjonalne. Doskonała komunikacja, zarówno w mowie, jak i piśmie (w języku angielskim). Udokumentowany przebieg dostaw. Silne umiejętności interpersonalne oraz umiejętność przewodzenia i wnoszenia wkładu w małym zespole. Mile widziane: Doświadczenie z bazami danych do szeregów czasowych/analitycznych, takimi jak Elasticsearch Doświadczenie w Scala Doświadczenie w tworzeniu RESTful API przy użyciu Java Spring Boot Znajomość komponentów technologii Cloud (preferowane: GCP),[] Wymagania: Scala, REST API, Spring Boot, Potoki danych, Spark, Yarn, Hive, SQL, Elasticsearch, Git, GitHub, Ansible, Modelowanie danych, SDLC, Jenkins, Wzorce projektowe, Umiejętności komunikacyjne, Analiza danych, GCP