Big Data Engineer (Umzug in den Nahen Osten) für mehr Über die Rolle: < p> Wir suchen talentierte Big Data Engineers zur Verstärkung unseres dynamischen Teams für ein spannendes neues Projekt. Dies ist eine einzigartige Gelegenheit, an einer hochmodernen Initiative zu arbeiten und in einem schnelllebigen Umfeld ein Team von Grund auf aufzubauen. Wenn Sie sich für Big-Data-Technologien begeistern und bereit für eine neue Herausforderung sind, möchten wir von Ihnen hören! Für dieses langfristige
Big Data Engineer (Umzug in den Nahen Osten)
für mehr
Über die Rolle:
< p> Wir suchen talentierte Big Data Engineers zur Verstärkung unseres dynamischen Teams für ein spannendes neues Projekt. Dies ist eine einzigartige Gelegenheit, an einer hochmodernen Initiative zu arbeiten und in einem schnelllebigen Umfeld ein Team von Grund auf aufzubauen. Wenn Sie sich für Big-Data-Technologien begeistern und bereit für eine neue Herausforderung sind, möchten wir von Ihnen hören!
Für dieses langfristige Projekt müssen Ingenieure so schnell wie möglich beitreten und in den Nahen Osten umziehen.
Anforderungen:
- Beherrschen Sie Hadoop und das HDFS-Ökosystem.
- Mindestens 3 Jahre Erfahrung im Bereich Data Engineering.
- Umfangreiche Vertrautheit mit der Cloudera Data Platform und ihren Laufzeitkomponenten.
- Umfangreiches Fachwissen mit Apache Spark.
- Praktische Erfahrung mit einer oder mehreren Programmiersprachen wie Python, Go oder Java.
- Solide Grundkenntnisse in Computersoftware, einschließlich Linux-Betriebssystemen, Speicher, Netzwerk-E/A und verwandten Prinzipien.
- Erfahrung mit Computer-, verteilten oder Big-Data-Systemen (z. B. Nginx, Kubernetes, Docker, OpenStack, Kafka) ist von Vorteil.
- Sehr wünschenswert sind gute Kenntnisse in den Bereichen Datenstruktur und Systemdesign.
Verantwortlichkeiten:
- Überwachen Sie die Einrichtung, Konfiguration und Wartung von Hadoop-Clustern und dem HDFS-Ökosystem.
- Stellen Sie die Datenintegrität und -verfügbarkeit im gesamten Hadoop Distributed File System sicher.
- Entwerfen, entwickeln und pflegen Sie skalierbare Datenpipelines.
- Implementieren Sie Datenaufnahmeprozesse, um große Datenmengen effizient zu erfassen und zu speichern.
- Arbeiten Sie mit Datenwissenschaftlern und Analysten zusammen, um deren Datenanforderungen zu erfüllen.
- Verwalten und optimieren Sie die Cloudera Data Platform und ihre Laufzeitkomponenten.
- Überwachen Sie die Systemleistung und beheben Sie Probleme, um eine hohe Verfügbarkeit und Zuverlässigkeit sicherzustellen.
- Entwickeln und pflegen Sie Apache Spark-Anwendungen für die Datenverarbeitung.
- Schreiben und pflegen Sie Code in Programmiersprachen wie Python, Go oder Java.
- Wenden Sie solide Grundkenntnisse über Computersoftware an, einschließlich Linux-Betriebssystemen, Speicher, Netzwerk-E/A und verwandten Prinzipien.
- Nutzen Sie Erfahrung mit Computer-, verteilten oder Big-Data-Systemen (z. B. Nginx, Kubernetes, Docker, OpenStack, Kafka).
- Wenden Sie ausgeprägte Fähigkeiten in den Bereichen Datenstruktur und Systemdesign an, um zuverlässige Lösungen zu entwickeln.