Средний инженер данных в Provectus

Мы ищем талантливого и опытного инженера по работе с данными среднего звена, который присоединится к нашей команде в Provectus. В рамках наших разнообразных практик, включая данные, машинное обучение, DevOps, разработку приложений и контроль качества, вы будете сотрудничать с многопрофильной командой инженеров данных, инженеров машинного обучения и разработчиков приложений. Вы столкнетесь с многочисленными техническими проблемами и получите возможность внести свой вклад в интересные проекты с открытым исходным кодом (например, ODD, UI для Kafka), создавать внутренние решения и участвовать в исследованиях и разработках, обеспечивая отличную среду для профессионального роста. ОбязанностиТесно сотрудничать с клиентами для глубоко понимать существующие ИТ-среды, приложения, бизнес-требования и цели цифровой трансформации; собирать большие объемы разнообразных наборов данных и управлять ими; работать напрямую с учеными по данным и инженерами ML для создания надежных и отказоустойчивых конвейеров данных, которые поставляют продукты данных; определять модели данных которые интегрируют разрозненные данные в организации; Проектирование, внедрение и обслуживание конвейеров ETL; Разработка и постоянное тестирование решений, управляемых данными. Требования: 3+ года опыта в области разработки данных; Опыт работы с облачными решениями (предпочтительно AWS, также GCP или Azure); Опыт работы с облаком. Платформы данных (например, Snowflake, Databricks); Владение технологиями «Инфраструктура как код» (IaC), такими как Terraform или AWS CloudFormation; Опыт обработки потоков данных в реальном времени и в пакетном режиме, а также хранения данных с помощью таких инструментов и технологий, как Airflow, Dagster, Kafka, Apache Druid. , Spark, dbt и т. д.;Знание языков программирования, имеющих отношение к инженерии данных, таких как Python и SQL;Опыт создания масштабируемых API;Опыт создания генеративных приложений искусственного интеллекта (например, чат-ботов, систем RAG);Знакомство с аспектами управления данными, такими как качество , Discovery, Lineage, Security, Business Gлоссарий, моделирование, основные данные и оптимизация затрат; Продвинутые или свободные навыки английского языка; Сильные навыки решения проблем и способность работать совместно в быстро меняющейся среде. Приятно иметь соответствующие AWS, GCP, Azure, Сертификаты Databricks;Знание инструментов BI (Power BI, QuickSight, Looker, Tableau и т. д.);Опыт построения решений для обработки данных в архитектуре Data Mesh;Знакомство с классическими задачами и инструментами машинного обучения (например, OCR, AWS SageMaker, MLFlow, и т. д.) Показать больше Показывай меньше Посадовый ровень Не застосовується Тип занятости Повний рабочий день Посадочные обвязки Финансы и Консалтинг Галузи Финансовые услуги и лекарства и здоровье здоровы