Инженер данных в Materialise

7 сентября 2024 г.

Data Engineer

Киев

Мы ищем опытного и увлеченного Data Engineer, который сможет присоединиться к Materialise.

Что вы будете делать

• Работать в тесном контакте с командой разработки данных и отчитываться перед командой разработки бизнес-процессов
• Быть ключевым лицом разработка (прием, создание конвейеров ETL, конвейеров развертывания, информационных панелей и т. д.) и поддержание внимания к озеру данных. OLAP (многомерная модель базы данных) и Tabular с DAX были необходимы только для обратного анализа и воссоздания логики с использованием озера данных. Если информационные панели будут разрабатываться с использованием Power BI, вы должны нести ответственность за знание этой технологии, поскольку табличная модель и DAX также используются в Power BI так же, как и в табличных кубах.
• Поддержка специалистов по обработке данных в подготовке и развертывании данных.
• Внесение вклада в приложения озера данных и запуск новых приложений искусственного интеллекта.
• Обеспечение обслуживания и поддержки производственных сред путем решения неотложных задач. запросы вовремя
• Стремимся предоставить готовую к работе, стабильную систему
• Сотрудничать для создания повторно используемых модулей IAC, используемых в других озерах данных
• Проектировать, разрабатывать и ведение отчетов на основе панелей мониторинга Power BI/Grafana/Quicksight.
• Проектирование, разработка, обслуживание и поддержка процессов ETL (SSIS) + DWH (в том числе в облаке).
• Выполнение моделирования данных, включая проектирование и разработку логических/физических уровней и процессов ETL, обеспечивая их масштабируемость и расширяемость (локально/в облаке).
• Технический анализ существующих решений (технологическое проектирование).
• Подготовка и поддержка технической документации

Ваш профиль

• Английский язык: профессиональное знание языка (для сотрудничества в письменной и устной форме с англоговорящими заинтересованными сторонами)< /li>
• Большой опыт работы с облачными технологиями (в т.ч. AWS: Lambda, Glue, S3, Athena и т. д.)
• Опыт работы с инфраструктурой как кодом (Terraform и т. д.).
• Обширный опыт (3+ года) с решениями для бизнес-аналитики, программированием SQL (2016/2019/...), РСУБД, а также понимание принципов оптимизации кода SQL.
• Хороший опыт работы с ETL/оркестрацией/конвейером данных/IoT/инструментами потоковой передачи данных.
• Опыт работы с Visual Studio и SQL Management Studio.
• Техническое понимание архитектур данных. и принципы хранения данных.
• Знание Spark, Python и SQL (T-SQL); опыт работы со SSIS, SSAS и/или SSRS является плюсом.
• Опыт работы с инструментами BI, такими как Power BI, DAX, Grafana, Quicksight и т. д.
• Опыт работы с Databricks является бонусом.
• Опыт работы с Azure DevOps, платформой Azure BI и рабочими процессами Git является преимуществом.
• Как минимум степень бакалавра в области компьютерных наук, математики, инженерии, информационных технологий или смежных технических областей.
• Практикаal, практический склад ума и способность работать независимо
• Хорошее общение с другими командами; командный игрок
• Стремится к обучению и быстро схватывает новые концепции и технологии