Старший інженер з даних (ІТ-рішення) в Sigma Software Group

Опис компанії Шукаю старшого інженера з обробки даних для керівництва невеликою командою, модернізації простої платформи даних у хмарний аналітичний проект самообслуговування. КЛІЄНТИ Програмне забезпечення Sigma надає послуги з розробки програмного забезпечення найвищої якості, графічного дизайну, тестування та підтримки. Системи, розроблені для надання переваг клієнтам в автомобільній, телекомунікаційній, авіаційній, рекламній, ігровій галузях, банківській справі, нерухомості та охороні здоров’я. ПРОЕКТ У рамках внутрішнього проекту в Sigma Software ми маємо дві основні цілі: автоматизувати звітність і створити систему самообслуговування система аналізу даних для нашої компанії. Ви відповідатимете за розробку та моделювання даних у DWH і Data Marts за допомогою Spark і MS SQL, надавати ці дані і співпрацювати з інженерами BI, які створюють звіти в Apache Superset, та іншими особами, які використовують такі дані . Крім того, ви працюватимете з іншими членами команди, які покладаються на ці дані. Частина вашого завдання включатиме перехід нашого локального рішення в хмарне середовище. Опис роботи. Наша мета — створити ефективну систему для збору, обробки, аналізу та візуалізації великих обсягів даних із різних джерел. Закласти основу та модель дані Розробити платформу для побудови та підтримки конвеєрів даних, які збирають дані з різних джерел. Створити Data Warehouse. Аналізувати та підготувати описи доменів у співпраці з Business analytics. Створити Data Marts. Розробити модель дозволів із гнучким контролем над вертикальним і горизонтальним доступом до даних. Кваліфікації. , розмірне моделювання, ETL/ELT, інструменти звітності, керування даними, сховища даних, структуровані та неструктуровані дані Глибокі знання SQL і досвід роботи з RDBMS, впевнене знання основ баз даних Досвід розробки баз даних і моделювання даних, в ідеалі з Databricks/Spark Досвід роботи з PythonWorking знання форматів серіалізації та їхніх компромісів (стовпцевий чи рядковий) Досвід налагодження та оптимізації завдань Spark Сильні навички письмового та усного спілкування Принаймні рівень англійської мови Upper-Intermediate BS з комп’ютерних наук або суміжної галузі Досвід роботи в бізнесі Intelligence tool is a nice-to-have Показати більше Показати менше Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов'язки Інформаційні технології Галузі Розробка програмного забезпечення