Основні обов’язки:Розробка, тестування та оптимізація ETL процесів для нових та існуючих кастомних проєктів.Взаємодія з аналітиками та бізнес-замовниками для точного збору технічних вимог.Моніторинг процесів обробки даних, виявлення та усунення проблем зі швидкістю та точністю даних.Розробка та впровадження стандартів і кращих практик для забезпечення якості та надійності даних.Вимоги до кандидата:Глибокі знання статистики та математичного аналізу.Мінімум 3 роки досвіду в розробці та оптимізації
Основні обов’язки:
- Розробка, тестування та оптимізація ETL процесів для нових та існуючих кастомних проєктів.
- Взаємодія з аналітиками та бізнес-замовниками для точного збору технічних вимог.
- Моніторинг процесів обробки даних, виявлення та усунення проблем зі швидкістю та точністю даних.
- Розробка та впровадження стандартів і кращих практик для забезпечення якості та надійності даних.
Вимоги до кандидата:
- Глибокі знання статистики та математичного аналізу.
- Мінімум 3 роки досвіду в розробці та оптимізації ETL процесів.
- Поглиблені знання SQL та Python, досвід роботи з реляційними та нереляційними базами даних.
- Досвід роботи з бібліотеками Python для обробки даних, такими як Pandas, NumPy, SciPy, та візуалізації даних за допомогою Looker Studio.
- Знання фреймворків для роботи з великими даними на Python, таких як PySpark або Dask.
- Досвід роботи з ETL інструментами, такими як Informatica, Talend, DataStage, або SSIS.
- Здатність ефективно спілкуватися як з технічними, так і з не технічними сторонами.
Буде корисно:
- Досвід роботи зі сховищами даних та технологіями обробки великих обсягів даних (наприклад, Hadoop, Spark, Kafka).
- Налаштування та підтримка інфраструктури управління версіями (наприклад, Git).
- Налаштування та підтримка контейнеризації (Docker).