Inżynier danych w Kyivstar/Kiyivstar

Zespół Kyivstar Big Data poszukuje utalentowanego Inżyniera Danych - specjalisty w dziedzinie tworzenia rozwiązań programowych, posiadającego praktyczne umiejętności pracy ze stosem Cloud (preferowany AWS), narzędziami Open Source ekosystemu Hadoop , zrozumienie procesów ETL i specjalności wdrażania potoków danych, do których zalicza się uczenie maszynowe.

Niezbędne umiejętności:

• ponad 2 lata doświadczenia w tworzenie oprogramowania
• Dobra znajomość Pythona
• Dobra znajomość SQL
• Doskonała znajomość zasad CI/CD
• Doświadczenie w projektowaniu procesów i rozwijanie procesów ETL dla potoków ML
• Doświadczenie w programowaniu w Pythonie lub Scali dla Apache Spark
• Doświadczenie w rozwoju opartym na testach i testowaniu integracyjnym

 Będzie dodatkowym atutem:

• Doświadczenie z bibliotekami Spark ML i Python ML
• Doświadczenie z Apache NiFi, Airflow
• Doświadczenie z technologiami chmurowymi
• Doświadczenie z Dockerem i Kubernetesem
• Znajomość dystrybucji Hortonworks lub Cloudera
• Doświadczenie w testowaniu i dostrajaniu wydajności< /li>

Obowiązki

• Opracowywanie procesów ETL dla potoków ML
• Tworzenie zautomatyzowanych narzędzi i wdrażanie modeli
• Automatyzuj procesy monitorowania jakości modeli
• Opracuj procedury automatycznego odświeżania modelu, aby uniknąć „nieaktualności”
• Optymalizuj potoki i przeglądaj kod Python/Spark

Oferujemy:

• Pracę z ogromnymi ilościami danych u największego operatora na Ukrainie
• Praktyczne doświadczenie z technologiami Big Data i narzędzia
• Duża różnorodność zadań i projektów pozwalających wykorzystać Twoją wiedzę i umiejętności; elastyczność narzędzi i podejść
• Możliwość rozwoju w zespole utalentowanych inżynierów danych