Cloud-Datenadministrator (Spark) in NATEK Poland

Das BI-Entwicklungsteam ist dabei, in die Azure Cloud zu wechseln. Einer der Hauptbereiche ist die Verwaltung von Spark Clustern (PaaS). Treten Sie uns bei und werden Sie Teil des Global BI Admin-Teams.

Sie arbeiten mit einem Team in Deutschland zusammen, das gesamte Projekt wird jedoch remote durchgeführt. Die Kommunikation erfolgt auf Englisch.

Vorteile:

• Internes Mobilitätsprogramm – genießen Sie viele Möglichkeiten zur beruflichen Weiterentwicklung, Jobrotationen, Vielfalt an Projekten und Technologien
< li> Empfehlungsprogramm – genießen Sie die Zusammenarbeit mit Ihren Kollegen und erhalten Sie einen Bonus!
• 5/10 Jahre NATEK Club – wir bieten eine langfristige Zusammenarbeit und feiern jedes fünfte Jubiläum der Zusammenarbeit mit Geschenken
< li> NATEK CSR Events & Teambuildings – genießen Sie unsere Werte: Verantwortung, Partnerschaft und Fachwissen und #workITwithus
• Cafeteria
• Medizinische Gesundheitsfürsorge
• Multisport Club Card
• Technisches und persönliches Training
• Sprachkurse

Zusätzlich nur für CoW:

• Lebensversicherung
• Boni für persönliche Ereignisse
• Freier Tag für Freiwilligenarbeit

UM IN DIESEM JOB ERFOLGREICH ZU WERDEN, MÜSSEN SIE ÜBER Folgendes verfügen: < /b>

• Min. 4 Jahre Erfahrung mit Apache Spark: Fortgeschrittene Kenntnisse der Spark-Architektur, einschließlich Komponenten (RDDs, DataFrames, Datasets)
• Sehr gute Kenntnisse von Spark SQL
• Kenntnisse im Einrichten, Konfigurieren, und Pflege von Spark-Clustern
• Verständnis von YARN
• Fähigkeit zur Optimierung von Spark-Jobs, Speichernutzung und Parallelität
• Vertrautheit mit Überwachungstools (bevorzugt: Grafana und Prometheus)
• Hadoop: HDFS, Hive und andere verwandte Technologien
• Kenntnisse in Python, Pyspark und Spark SQL
• Kenntnisse in der Sicherung von Spark-Clustern und -Daten.
• Fähigkeit zur Fehlerbehebung
• Erfahrung in der Leitung eines IT-Teams
• Gute Kommunikation mit Entwicklern, Dateningenieuren und Stakeholdern.
• Erfahrung in funktionsübergreifenden Teams