Середній інженер даних в VeliTech

Middle Data Engineer Київ, віддалено VeliTech — це продуктова компанія, де кожен захоплюється технологіями та прагне бути попереду. Наша команда живиться завдяки глибокому розумінню передових фреймворків, технологій і постійному навчанню. Ця комбінація принесла нам успіх: понад 35 мільйонів користувачів обслуговують наші продукти iGaming, революційний Tech Radar і команду з понад 200 світлих умів, завдяки яким це сталося. І ця команда готова вітати вас у світі можливостей для розвитку та розширення вашого досвіду. Якщо це викликає ваш інтерес, не шукайте далі — це ідеальна можливість для вас! Ми запрошуємо інженера середньої обробки даних приєднатися до команди продуктів VeliHorizon. Horizon — це мікросервісна платформа, керована API, яка виводить онлайн-казино, спортивні ставки тощо на наступний рівень. Наша передова технологія інтегрується з провідними постачальниками ігор для створення високозахищеного, сумісного ігрового середовища, розробленого для задоволення потреб усіх клієнтів. Технологічний стек: Scala 2/3, Typed Akka, ZIO, PostgreSQL, Elasticsearch, Clickhouse, K8s, Kafka, gRPC, AWS У цій ролі ви будете: Архітектор, проектувати та впроваджувати конвеєри ETL для багатьох джерел даних, які щоденно отримують величезні обсяги даних Розробляти і підтримувати нові проекти та інструменти навколо сховища даних. Оптимізувати, покращувати та рефакторювати поточні програми, якщо це буде вважатися за потрібне. Співпрацювати з інженерами програмного забезпечення для збору, форматування та підготовки даних для різних цілей. Розробляти та підтримувати інтерфейси API, необхідні для доступу до даних. Навички та досвід, які вам знадобляться : Принаймні 3+ роки досвіду як Data Engineering Досвідчене володіння SQL і RDBMS, бажано PostgreSQL Професійний досвід використання Python для цілей обробки даних, розробки серверних мікросервісів, RESTful API Досвід роботи з Kubernetes Хороші навички роботи з даними/обробки даних Досвід розуміння принципів побудови Data Warehouse Практичний досвід розробка конвеєрів даних ETL, ELT, надання оброблених даних кінцевим користувачам Буде великим плюсом: досвід роботи з Airflow, тобто створення DAG, проектування та моніторинг конвеєрів даних Досвід роботи зі сховищами даних у реальному часі на основі потокової передачі даних, переважно зацікавлені в Apache Kafka, Spark чи подібних. CI/CD з використанням конвеєрів Дженкінса або подібних інструментів Інструменти/процеси синхронізації даних між різнорідними джерелами даних (SQL, NoSQL, DMS, Clickhouse, BigQuery, ElasticSearch тощо) Ступінь у галузі даних, статистика, прикладна математика, економетрика, комп’ютерні науки або інші суміжні галузі Weoffer: Health догляд Медичне страхування — повне покриття Оплачувані лікарняні — 10 днів Програма благополуччя Заслужений відпочинок Оплачувана відпустка — 20 днів Можливості роботи з будь-якого місця Домашній офіс Комбінуйте обидва варіанти так, як вам хочеться Навчання та розвиток Можливість відвідувати конференції та професійні заходи Внутрішні навчальні програми Спосіб життя Мислення про продукт Інженерна культура в нашій Т-подібній моделі набору навичок ДНК