Старший Java-разработчик (Spark, Hadoop) в Luxoft

Платформа управления данными между активами следующего поколения, обеспечивающая глобально согласованные данные и инновационные инструменты для поддержки бизнес-стратегии для клиентов, занимающихся торговлей/продажами, построенная на архитектуре больших данных, хорошо масштабируемая и готовая к использованию в облаке. Платформа обеспечивает ведущую в отрасли аналитику, отчетность клиентов, соблюдение нормативных требований, надзор, надзорную отчетность и решения для обработки данных (data Flame). Технологический стек проекта: Apache Spark, Hive, Java, Scala, Spring, SQL, Kafka, Hadoop.

Мы ищем сильного старшего Java-разработчика с опытом работы с большими данными (Hadoop, Spark), способного разработать дизайн и создать структуру для предоставления и распространения данных о рисках среди широкого круга потребителей, включая финансистов. , Системы управления рисками фронт-офиса, Торговые системы, Бэк-офис и системы учета. Это должно охватывать доступ с низкой задержкой и механизмы потоковой передачи, push/pull в зависимости от типа потребителей.

Роль старшего Java-разработчика предполагает работу с сильными командами разработчиков, возможность работать с большими данными, улучшая знания в этой области, используя ресурсы международного банка.

Обязанности

Проектирование и создание инфраструктур для приема/моделирования сложных данных о рисках

Разработка кэширования с низкой задержкой для обслуживания систем управления рисками фронт-офиса.

Навыки

Обязательно

Опыт разработки программного обеспечения не менее 4 лет, включая профессиональный опыт разработки серверной части программного обеспечения;

Хорошее знание языков программирования Java.

1+ год разработки больших данных и обширный практический опыт программирования Spark.

Хорошее знание технологий больших данных, таких как Hadoop (Hive) и Spark.

Должен быть знаком с алгоритмами и шаблонами проектирования.

Понимание распределенных систем.

Понимание рабочего процесса CI/CD.

Знание среды Linux, включая навыки написания сценариев.

Приятно иметь

Опыт работы с базами данных в памяти и кэшированием

Инструменты управления заданиями, такие как Autosys или Airflow

Финансовое образование (где это возможно)

Другие

Языки

Английский: уровень B2 выше среднего

Старший возраст

Старший