Старший розробник Java (Spark, Hadoop) в Luxoft

26 серпня 2024 р

Старший розробник Java (Spark, Hadoop)

віддалено

• Опис проекту: Наступне покоління Платформа керування даними між активами, щоб надавати глобально узгоджені дані та інноваційні інструменти для підтримки бізнес-стратегії для торгових/продажних клієнтів, яка побудована на архітектурі великих даних, високомасштабована та готова до роботи в хмарі. Платформа забезпечує провідну в галузі аналітику, клієнтську звітність, відповідність нормативним вимогам, спостереження, наглядову звітність і наукові рішення для даних (data flame). Технічний стек проекту: Apache Spark, Hive, Java, Scala, Spring, SQL, Kafka, Hadoop.
  Ми шукаємо потужного старшого Java-розробника з досвідом роботи з великими даними (Hadoop, Spark), здатного розробити дизайн і встановити структуру, щоб розкривати та поширювати дані про ризики широкому колу споживачів, включаючи фінанси , Фронт-офісні системи ризиків, торгові системи, бек-офіс та системи облікових записів. Це має охоплювати доступ із низькою затримкою та механізми потокового передавання, Push / Pull залежно від типу споживачів.
  Роль старшого розробника Java передбачає роботу з сильними командами розробників, можливість працювати з великими даними, покращуючи знання в цій області, використовуючи ресурси міжнародного банку.
• Обов’язки: • Розробка та створення інфраструктури для прийому/моделювання складних даних про ризики
  • Розробка кешування з низькою затримкою для обслуговування систем ризиків Front Office
• Опис обов’язкових навичок: • Принаймні 4 роки досвіду розробки програмного забезпечення, включаючи професійний досвід розробки серверного програмного забезпечення;
  • Досконале знання мов програмування Java
  • Понад 1 рік розробки Big data з багатим практичним досвідом програмування Spark
  • Досконале знання технологій великих даних, як-от Hadoop (Hive) і Spark
  • Має бути знайомий з алгоритмами та шаблонами проектування
  • Розуміння розподілених систем.
  • Розуміння робочого процесу CI/CD.
  • Знайомство з середовищем Linux, включаючи навички створення сценаріїв
• Опис навичок, які приємно мати: • Досвід баз даних у пам’яті та кешування
  • Інструменти оркестрування завдань наприклад Autosys або Airflow
  • Фінансовий досвід (де це можливо)
• Мови:
  

  
  

  • Англійська: B2 Вище середнього