Інженер великих даних в RecruitGarden

Хочете змінити світ цифрового читання? Приєднуйтеся до платформи з понад 1 млн. назв і 60 млн. документів. Пориньте в проблеми масштабування програми, даних у реальному часі та машинного навчання. Ми шукаємо інженера з великих даних, щоб разом досягти успіху. Віддалені + ТОП-умови — давайте обговоримо? Обов’язки:– керування якістю та цілісністю даних– допомога в створенні інструментів і технологій, щоб гарантувати, що подальші клієнти можуть вірити в дані, які вони споживають– багатофункціональна робота з Data Science або Content Групи інженерів для усунення несправностей, обробки або оптимізації важливих для бізнесу конвеєрів– співпрацюйте з Core Platform для впровадження кращих завдань обробки для масштабування споживання наборів потокових даних. Вимоги:– 3+ роки досвіду в розробці даних, створенні або наскрізному управлінні конвеєри даних у великих складних наборах даних.– знання Spark– знання Scala та/або Python– вільне володіння принаймні одним діалектом SQL– рівень англійської мови: Upper-IntermediateЯк плюс– досвід роботи з платформами потокового передавання, які зазвичай базуються на Kafka– досвід у Terraform, Airflow– глибоке розуміння служб платформи даних AWS та їх сильні/слабкі сторони– великий досвід використання Jira, Slack, JetBrains IDE, Git, GitLab, GitHub, Docker, Jenkins– досвід використання DataBricksМи пропонуємо:– високу компенсацію відповідно до ваших технічні навички– довгострокові проекти (12м+) із чудовими клієнтами– 5-денний робочий тиждень, 8-годинний робочий день, гнучкий графік– демократичний стиль управління та дружнє середовище– повна віддаленість– щорічна оплачувана відпустка — 20 б/д + неоплачувана відпустка – оплачувані лікарняні — 6 б/днів на рік– 12 національних свят– корпоративні пільги (заочне навчання, курси англійської мови, корпоративні заходи/тімбілдинги)– професійне та особистісне зростання