Data Engineer Київ Das Kyivstar Big Data-Team sucht einen talentierten Data Engineer – Spezialisten im Bereich Entwicklung Softwarelösungen, mit praktischen Kenntnissen in der Arbeit mit Cloud Stack (AWS bevorzugt), Open-Source-Tools des Hadoop-Ökosystems, Verständnis von ETL-Prozessen und Spezialgebieten der Implementierung von Datenpipelines, einschließlich maschinellem Lernen. Erforderliche Fähigkeiten: 2+ Jahre Erfahrung in der Softwareentwicklung Gute Kenntnisse in Python Gute SQL-Ke
Data Engineer
Київ
Das Kyivstar Big Data-Team sucht einen talentierten Data Engineer – Spezialisten im Bereich Entwicklung Softwarelösungen, mit praktischen Kenntnissen in der Arbeit mit Cloud Stack (AWS bevorzugt), Open-Source-Tools des Hadoop-Ökosystems, Verständnis von ETL-Prozessen und Spezialgebieten der Implementierung von Datenpipelines, einschließlich maschinellem Lernen.
Erforderliche Fähigkeiten:
- 2+ Jahre Erfahrung in der Softwareentwicklung
- Gute Kenntnisse in Python
- Gute SQL-Kenntnisse
- Gute Kenntnisse der CI/CD-Prinzipien
- Erfahrung im Prozessdesign und der Entwicklung von ETL-Prozessen für ML-Pipelines
- Erfahrung mit der Programmierung in Python oder Scala für Apache Spark
- Erfahrung in testgetriebener Entwicklung und Integrationstests
Wäre von Vorteil:
< ul>
Erfahrung mit Spark ML- und Python ML-Bibliotheken Erfahrung mit Apache NiFi, Airflow Erfahrung mit Cloud-Technologien Erfahrung mit Docker und Kubernetes < /li> Vertrautheit mit Hortonworks- oder Cloudera-Distributionen Erfahrung mit Leistungstests und -optimierung Verantwortlichkeiten
- ETL-Prozesse für ML-Pipelines entwickeln
- Erstellung automatisierter Tools und Modellbereitstellung
- Prozesse zur Modellqualitätsüberwachung automatisieren
- Verfahren zur automatischen Modellaktualisierung entwickeln „Veraltetheit“ vermeiden
- Pipelines optimieren und Python/Spark-Code überprüfen
Wir bieten:
- Arbeiten mit riesigen Datenmengen beim größten Betreiber der Ukraine
- Praktische Erfahrung mit Big-Data-Technologien und -Tools
- Große Vielfalt an Aufgaben und Projekten, um Ihr Wissen und Ihre Fähigkeiten zu nutzen; Flexibilität bei Tools und Ansätzen
- Möglichkeit, innerhalb des Teams talentierter Dateningenieure zu wachsen