Старший Java-разработчик (Spark, Hadoop) в Luxoft

26 сентября 2024 г.

Старший разработчик Java (Spark, Hadoop)

Добавлено

• Описание проекта: Новое поколение Платформа управления межактивными данными для предоставления глобально согласованных данных и инновационных инструментов для поддержки бизнес-стратегии для клиентов, занимающихся торговлей/продажами, построенная на архитектуре больших данных, хорошо масштабируемая и готовая к использованию в облаке. Платформа обеспечивает ведущую в отрасли аналитику, отчетность клиентов, соблюдение нормативных требований, надзор, надзорную отчетность и решения для обработки данных (data Flame). Технологический стек проекта: Apache Spark, Hive, Java, Scala, Spring, SQL, Kafka, Hadoop.
  Мы ищем сильного старшего разработчика Java с опытом работы с большими данными (Hadoop, Spark), способного разработать дизайн и создать структуру, чтобы предоставлять и распространять данные о рисках среди широкого круга потребителей, включая финансы. , Системы управления рисками фронт-офиса, Торговые системы, Бэк-офис и системы учета. Это должно охватывать доступ с низкой задержкой и механизмы потоковой передачи, push/pull в зависимости от типа потребителей.
  Роль старшего Java-разработчика предполагает работу с сильными командами разработчиков, возможность работать с большими данными, улучшая знания в этой области, используя ресурсы международного банка.
• Обязанности: • Разработка и создание инфраструктур для приема/моделирования сложных данных о рисках
  • Разработка кэширования с низкой задержкой для обслуживания систем управления рисками фронт-офиса
• Описание обязательных навыков: • Опыт работы в области разработки программного обеспечения не менее 4 лет, включая профессиональный опыт разработки серверной части программного обеспечения;
  • Отличное знание языков программирования Java
  • Более 1 года разработки больших данных и обширный практический опыт программирования Spark.
  • Хорошее знание технологий больших данных, таких как Hadoop (Hive) и Spark.
  • Должен быть знаком с алгоритмами и шаблонами проектирования.
  • Понимать работу распределенных систем.
  • Понимание рабочего процесса CI/CD.
  • Знакомство со средой Linux, включая навыки написания сценариев.
• Описание желательных навыков: • Опыт работы с базами данных в памяти и кэшированием
  • Инструменты оркестрации заданий. например Autosys или Airflow
  • Финансовое образование (где это возможно)
• Языки:
  

  
  

  • Английский: B2 выше среднего