Инженер данных в Profit.Store

Основные обязанности:

• Разработка, тестирование и оптимизация ETL процессов для новых и существующих кастомных проектов.
• Взаимодействие с аналитиками и бизнес-заказчиками для точного сбора технических требований.
li>
• Мониторинг процессов обработки данных, выявление и устранение проблем со скоростью и точностью данных.
• Разработка и внедрение стандартов и лучших практик для обеспечения качества и надежности данных.

• Глубокие знания статистики и математического анализа.
• Минимум 3 года опыта в разработке и оптимизации ETL процессов.
• Углубленные знания SQL и Python, опыт работы с реляционными и нереляционными базами данных.
• Опыт работы с библиотеками Python для обработки данных, такими как Pandas, NumPy, SciPy и визуализации данных с помощью Looker Studio.
• Знание фреймворков для работы с большими данными на Python, таких как PySpark или Dask.
• Опыт работы с ETL инструментами, такими как Informatica, Talend, DataStage, или SSIS.
• Способность эффективно общаться как с техническими, да и с не техническими сторонами.

Будет полезно:

• Опыт работы с хранилищами данных и технологиями обработки больших объемов данных (например, Hadoop, Spark, Kafka).
• Настройка и поддержка инфраструктуры управления версиями (например, Git).
• Настройка и поддержка контейнеризации (Docker).