Leitender Dateningenieur || Big Data Engineer bei DCV Global Recruitment in DCV Global Recruitment

Senior Data Engineer: Erfahrung in Scala, Python oder Java und Unix/Linux-Umgebungen vor Ort. Erfahrung mit der Entwicklung von RESTful-APIs mit Java Spring Boot. Praktische Erfahrung beim Aufbau von Datenpipelines mit Hadoop-Komponenten (Apache Hadoop, Scala, Apache Spark, YARN, Hive , SQL) Erfahrung in der Optimierung von Spark-Jobs. Erfahrung mit Zeitreihen-/Analysedatenbanken wie Elasticsearch. Erfahrung mit branchenüblichen Versionskontrolltools (Git, GitHub) und automatisierten Bereitstellungstools (Ansible und Jenkins). Grundlegende Shell-Scripting-Kenntnisse. Verständnis für Big-Data-Modellierungstechniken Nutzung relationaler und nicht-relationaler Techniken. Eigeninitiative, Proaktivität und teamorientierte Einstellung erforderlich. Lernbereitschaft und schnelle Anpassung an sich ändernde Anforderungen. Erfahrung und Verständnis von SDLC (Software Development Lifecycle). Gut zu haben: Erstellen/Aktualisieren/ Pflege einer gemeinsamen Jenkins-Bibliothek. Verständnis oder Erfahrung mit Cloud-Entwurfsmustern. Hervorragende Kommunikationsfähigkeiten. Big Data Engineer (Hadoop). Erfahrung in Python, pySpark und Unix/Linux-Umgebungen vor Ort. Praktische Erfahrung im Aufbau von Datenpipelines mit Hadoop-Komponenten (Apache Hadoop, Apache Spark, YARN, Hive, SQL) Erfahrung mit branchenüblichen Versionskontrolltools (Git, GitHub) und automatisierten Bereitstellungstools (Ansible & Jenkins) Erfahrung in der Optimierung von Spark-Jobs Grundlegende Shell-Scripting-Kenntnisse Verständnis von Big-Data-Modellierungstechniken unter Verwendung relationaler und nicht relationaler Techniken Erforderlich Eigenständig, proaktiv und teamorientiert sein. Lernbereitschaft und schnelle Anpassung an sich ändernde Anforderungen. Erfahrung und Verständnis von SDLC (Software Development Lifecycle). Fähigkeit, mit Geschäftsanwendern und Team-Stakeholdern wie Projektmanagern und Architekten zusammenzuarbeiten. Ausgezeichnete Datenanalysefähigkeiten mit Erfahrung im Umgang mit großen und komplexen Datensätzen. Gute Kenntnisse der Structured Query Language (SQL). Sehr analytisch mit ausgezeichneter Liebe zum Detail. Erfahrung in der Analyse von Geschäftsanforderungen und deren Umsetzung in effektive funktionale Lösungen. Ausgezeichnete Kommunikation, sowohl schriftlich als auch mündlich (auf Englisch). Nachweisbare Erfolgsbilanz bei der Lieferung. Starke zwischenmenschliche Fähigkeiten und die Fähigkeit, in einem kleinen Team sowohl zu führen als auch einen Beitrag zu leisten. Gut zu haben: Erfahrung mit Zeitreihen-/Analysedatenbanken wie Elasticsearch. Erfahrung in Scala. Erfahrung mit der Entwicklung von RESTful-APIs unter Verwendung von Java Spring Boot. Vertraut mit Cloud-Technologiekomponenten (bevorzugt: GCP),[] Anforderungen: Scala, REST API, Spring Boot, Datenpipelines, Spark, Yarn, Hive, SQL, Elasticsearch, Git, GitHub, Ansible, Datenmodellierung, SDLC, Jenkins, Designmuster, Kommunikationsfähigkeiten, Datenanalyse, GCP