Старший інженер з даних в Dataforest

Шукаю старшого інженера з даних, який приєднається до команди Dataforest. Якщо ви шукаєте дружню команду, здорове робоче середовище та гнучкий графік – ви знайшли правильне місце, щоб надіслати своє резюме. Вимоги до навичок:• 4+ роки досвіду роботи з Python;• 3+ роки досвіду в якості Data Engineer;• Знання алгоритмів і структур даних ОБОВ’ЯЗКОВО;• Відмінний досвід роботи з Pandas;• Відмінний досвід роботи з SQL DB / NoSQL (Redis, Mongo, Elasticsearch) / BigQuery;• Досвід Apache Kafka, Apache Spark (pyspark); • Досвід роботи з Hadoop;• Знайомство з Amazon Web Services;• Розуміння основ кластерних обчислень;• Робота з великими таблицями 100м+. Додаткові навички (як плюс):• Досвід планування та моніторингу (Databricks, Prometheus, Grafana); • Досвід роботи з Airflow; • Досвід роботи зі Snowflake, Terraform; • Досвід у статистиці; • Знання алгоритмів DS та машинного навчання. Основні обов’язки: • Створення конвеєрів ETL та рішень для управління даними (API, логіка інтеграції); • Розробка різних алгоритмів обробки даних; • Участь у створенні прогнозів, рекомендацій та класифікації моделі;• Розробка та впровадження робочих процесів для отримання та перетворення нових джерел даних, які будуть використовуватися в компанії;• Розробка існуючої інфраструктури Data Engineering, щоб зробити її масштабованою та підготувати її до очікуваних прогнозованих майбутніх обсягів;• Визначення, проектування та впровадження вдосконалень процесів (тобто автоматизація ручних процесів, модернізація інфраструктури тощо). Ми пропонуємо:• Чудові можливості спілкування з міжнародними клієнтами, складні завдання;• Побудова цікавих проектів з нуля з використанням нових технологій;• Можливості особистого та професійного розвитку;• Конкурентоспроможна фіксована зарплата в доларах США; • Оплачувані відпустки та лікарняні, медичне страхування;• Гнучкий графік роботи;• Дружня робоча атмосфера з мінімальною ієрархією;• Командоутворення, корпоративні заходи.