Средний инженер данных в VeliTech

Middle Data Engineer Киев, открыто VeliTech — это продуктовая компания, в которой все увлечены технологиями и стремятся быть на шаг впереди. Наша команда основана на глубоком понимании передовых структур, технологий и непрерывном обучении. Эта комбинация принесла нам успех: более 35 миллионов пользователей обслуживают наши продукты iGaming, революционный Tech Radar и команду из более чем 200 ярких умов, которые сделали это возможным. И эта команда готова предоставить вам мир возможностей для роста и расширения своего опыта. Если это вас заинтересовало, не ищите дальше — это идеальная возможность для вас! Мы приглашаем инженера по средним данным присоединиться к команде продуктов VeliHorizon. Horizon — это платформа на основе микросервисов, управляемая API, которая выводит онлайн-казино, ставки на спорт и многое другое на новый уровень. Наша передовая технология интегрируется с ведущими игровыми поставщиками для создания высокозащищенной и соответствующей требованиям игровой среды, разработанной для удовлетворения всех потребностей клиентов. Технический стек: Scala 2/3, Typed Akka, ZIO, PostgreSQL, Elasticsearch, Clickhouse, K8s, Kafka, gRPC, AWS. На этой должности вы будете: разрабатывать, проектировать и реализовывать конвейеры ETL для нескольких источников данных, ежедневно принимающих огромные объемы данных. и поддерживать новые проекты и инструменты для хранилища данных. Оптимизировать, улучшать и реорганизовывать существующие приложения, если это будет сочтено целесообразным. Сотрудничать с разработчиками программного обеспечения для сбора, форматирования и подготовки данных для различных целей. Разрабатывать и поддерживать интерфейсы API, необходимые для доступа к данным. Навыки и опыт, которые вам потребуются. : Не менее 3 лет опыта работы в качестве инженера данных. Знание SQL и РСУБД, предпочтительно PostgreSQL. Профессиональный опыт использования Python для целей обработки данных, разработки серверных микросервисов, RESTful API. Опыт работы с Kubernetes. Сильные навыки обработки данных. Опыт понимания принципов построения хранилищ данных. Практический опыт. проектирование конвейеров данных ETL, ELT, предоставление обработанных данных конечным пользователям. Будет большим плюсом: Опыт работы с Airflow, т.е. создание групп DAG, проектирование и мониторинг конвейеров данных. Опыт работы с потоковыми хранилищами данных в реальном времени, в основном интересуется Apache Kafka, Spark или аналогичными. Знание с CI/CD с использованием конвейеров Jenkins или аналогичных инструментов. Инструменты/процессы синхронизации данных между разнородными источниками данных (SQL, NoSQL, DMS, Clickhouse, BigQuery, ElasticSearch и т. д.). Степень в области науки о данных, статистики, прикладной математики, эконометрики, информатики или других смежных областях. Мы предлагаем: здравоохранение. уход Медицинская страховка — полное покрытие Оплачиваемые больничные — 10 дней Программа оздоровления Заслуженный отдых Оплачиваемый отпуск — 20 дней Возможность работать где угодно Домашний офис Смешивайте оба варианта так, как вам хочется Обучение и развитие Возможность посещать конференции и профессиональные мероприятия Внутренние образовательные программы Образ жизни Продуктовое мышление Инженерная культура в нашей ДНК Т-образная модель набора навыков