Dateningenieur in Kyivstar/Kiyivstar

Das Big Data-Team von Kyivstar sucht einen talentierten Data Engineer – Spezialisten im Bereich der Entwicklung von Softwarelösungen mit praktischen Kenntnissen in der Arbeit mit Cloud Stack (AWS bevorzugt), Open-Source-Tools des Hadoop-Ökosystems , Verständnis von ETL-Prozessen und Besonderheiten der Implementierung von Datenpipelines, einschließlich maschinellem Lernen.

Erforderliche Fähigkeiten:

• 2+ Jahre Erfahrung in Softwareentwicklung
• Gute Python-Kenntnisse
• Gute SQL-Kenntnisse
• Gute Kenntnisse der CI/CD-Prinzipien
• Erfahrung im Prozessdesign und Entwicklung von ETL-Prozessen für ML-Pipelines
• Erfahrung mit der Programmierung in Python oder Scala für Apache Spark
• Erfahrung in testgetriebener Entwicklung und Integrationstests

 Wäre ein Pluspunkt:

• Erfahrung mit Spark ML- und Python ML-Bibliotheken
• Erfahrung mit Apache NiFi, Airflow
• Erfahrung mit Cloud-Technologien
• Erfahrung mit Docker und Kubernetes
• Vertrautheit mit Hortonworks- oder Cloudera-Distributionen
• Erfahrung mit Leistungstests und -optimierung< /li>

Verantwortlichkeiten

• Entwicklung von ETL-Prozessen für ML-Pipelines
• Erstellung automatisierter Tools und Modellbereitstellung
• Prozesse zur Modellqualitätsüberwachung automatisieren
• Automatische Modellaktualisierungsverfahren entwickeln, um „Veraltetheit“ zu vermeiden
• Pipelines optimieren und Python/Spark-Code überprüfen

Wir bieten:

• Arbeiten mit riesigen Datenmengen beim größten Betreiber in der Ukraine
• Praktische Erfahrung mit Big-Data-Technologien und Tools
• Große Vielfalt an Aufgaben und Projekten, um Ihr Wissen und Ihre Fähigkeiten einzusetzen; Flexibilität bei Tools und Ansätzen
• Möglichkeit, im Team talentierter Dateningenieure zu wachsen