Leitender Java-Entwickler (Spark, Hadoop) in Luxoft

26. September 2024

Senior Java Developer (Spark, Hadoop)

віддалено

• Projektbeschreibung: Eine nächste Generation Cross-Asset-Datenmanagementplattform zur Bereitstellung global konsistenter Daten und innovativer Tools zur Unterstützung der Geschäftsstrategie für Handels-/Vertriebskunden, die auf einer Big-Data-Architektur aufbaut, hoch skalierbar und cloudfähig ist. Die Plattform ermöglicht branchenführende Analysen, Kundenberichte, Einhaltung gesetzlicher Vorschriften, Überwachung, Aufsichtsberichte und datenwissenschaftliche Lösungen (Data Flame). Der Tech-Stack des Projekts: Apache Spark, Hive, Java, Scala, Spring, SQL, Kafka, Hadoop.
  Wir suchen einen starken Senior Java-Entwickler mit Big Data-Erfahrung (Hadoop, Spark), der in der Lage ist, das Design zu erstellen und das Framework zu etablieren, um die Risikodaten einer Vielzahl von Verbrauchern, einschließlich der Finanzabteilung, zugänglich zu machen und zu verteilen , Front-Office-Risikosysteme, Handelssysteme, Back-Office- und Kontosysteme. Dies sollte je nach Art der Verbraucher den Zugriff mit geringer Latenz sowie Streaming- und Push-/Pull-Mechanismen abdecken.
  Die Rolle des Senior Java Developer beinhaltet die Zusammenarbeit mit starken Entwicklungsteams und die Möglichkeit, mit Big Data zu arbeiten, das Wissen in diesem Bereich zu verbessern und dabei die Ressourcen einer internationalen Bank zu nutzen.
• Verantwortlichkeiten: • Entwerfen und Erstellen von Frameworks für die Aufnahme/Modellierung der komplexen Risikodaten
  • Entwickeln von Caching mit geringer Latenz für die Bedienung von Front-Office-Risikosystemen
• Beschreibung der obligatorischen Fähigkeiten: • Mindestens 4 Jahre Erfahrung in der Softwareentwicklung, einschließlich Erfahrung in der professionellen Backend-Softwareentwicklung;
  • Ausgeprägte Kenntnisse der Java-Programmiersprachen
  • Mehr als ein Jahr Big-Data-Entwicklung mit umfangreicher praktischer Erfahrung in der Spark-Programmierung
  • Ausgeprägte Kenntnisse der Big-Data-Technologien wie Hadoop (Hive) und Spark
  • Sollte mit Algorithmen und Entwurfsmustern vertraut sein.
  • Verständnis für verteilte Systeme.
  • Verständnis des CI/CD-Workflows.
  • Vertrautheit mit der Linux-Umgebung, einschließlich Skripting-Kenntnissen
• Nice-to-Have-Fähigkeiten Beschreibung: • Erfahrung mit In-Memory-Datenbanken und Caching
  • Job-Orchestrierungstools wie Autosys oder Airflow
  • Finanzieller Hintergrund (wo möglich)
• Sprachen:
  

  
  

  • Englisch: B2 Obere Mittelstufe