Середній інженер великих даних в KITRUM

— 3-4 роки досвіду в розробці даних, створюючи або керуючи наскрізними конвеєрами даних на великих складних наборах даних. — Досвід розробки масштабованого програмного забезпечення з використанням технологій великих даних (наприклад, Hadoop, Spark, Hive, Flink, Samza, Storm, Elasticsearch , Druid, Cassandra тощо).— Знання Scala— Вільне володіння принаймні одним діалектом SQL— Рівень англійської: Upper-IntermediateЯк плюс— Досвід роботи з платформами потокового передавання, які зазвичай базуються на Kafka— Добре володіють службами платформи даних AWS та їхні сильні/слабкі сторони — Великий досвід використання Jira, Slack, JetBrains IDE, Git, GitLab, GitHub, Docker, Jenkins, Terraform — Досвід використання DataBricks Client — це американський сервіс підписки на електронні та аудіокниги, який включає мільйон назв. Платформа містить 60 мільйонів документів на своїй відкритій платформі публікації. Платформа дозволяє:— будь-кому ділитися своїми ідеями зі світом;— доступ до аудіокниг;— доступ до світових композиторів, які публікують свою музику;— містить статті приватних видавництв і світові журнали; — надає доступ до ексклюзивного вмісту. Core Platform забезпечує надійне та базове програмне забезпечення, що підвищує операційну досконалість для масштабування програм і даних. Ми зосереджені на створенні, тестуванні, розгортанні додатків та інфраструктури, які допоможуть іншим командам швидко масштабувати, взаємодіяти, інтегрувати дані в реальному часі та використовувати машинне навчання у своїх продуктах. Працюючи з нашими клієнтами у відділах Data Science та Content Engineering, а також з нашими колегами у внутрішніх інструментах та командах інфраструктури, ми надаємо видимість системного рівня та фокусуємося на наших проектах. Метою клієнта є не повна архітектурна чи дизайнерська досконалість, а скоріше вибір правильної торгової щоб знайти баланс між швидкістю, якістю та ціною. ,[ Керуйте якістю та цілісністю даних. Допомагайте з розробкою інструментів і технологій, щоб гарантувати, що подальші клієнти можуть вірити в дані, які вони споживають. Багатофункціональна робота з командами Data Science або Content Engineering для усунення несправностей, обробки або оптимізації бізнесу - критичні конвеєри, робота з Core Platform для впровадження кращих завдань обробки для масштабування споживання наборів потокових даних] Вимоги: Scala, Big Data, Hadoop, Spark, SQL Додатково: невеликі команди, міжнародні проекти, навчання Masterclazz, уроки англійської мови, дружня атмосфера .