Старший інженер з даних (ІТ-рішення) в Sigma Software

Шукаю старшого інженера з даних для керівництва невеликою командою, модернізації простої платформи даних у хмарний аналітичний проект самообслуговування.

ЗАМОВНИК

Sigma Software надає послуги з розробки програмного забезпечення найвищої якості, графічного дизайну, тестування та підтримки. Системи, розроблені для надання переваг клієнтам у галузях автомобільної, телекомунікаційної, авіаційної, рекламної, ігрової, банківської справи, нерухомості та охорони здоров’я.

ПРОЕКТ

У рамках внутрішнього проекту в Sigma Software ми маємо дві головні цілі: автоматизувати звітування та створити систему аналізу даних із самообслуговуванням для нашої компанії.

Ви відповідатимете за розробку та моделювання даних у DWH і Data Marts за допомогою Spark і MS SQL, надання цих даних і співпрацюючи з інженерами BI, які створюють звіти в Apache Superset, та іншими ролями, які використовують такі дані. Крім того, ви працюватимете з іншими членами команди, які покладаються на ці дані. Частина вашого завдання включатиме перехід нашого локального рішення в хмарне середовище.

ОБОВ’ЯЗКИ

• Наші мета — створити ефективну систему для збору, обробки, аналізу та візуалізації великих обсягів даних із різних джерел

• Закласти основу та змоделювати дані

• Розробити платформу для побудови та підтримки конвеєрів даних, які збирають дані з різних джерел

• Створення сховища даних

• Аналіз і підготовка описів доменів у співпраці з Business analytics

• Створення Вітрини даних

• Створіть модель дозволів із гнучким керуванням вертикальним і горизонтальним доступом до даних

ВИМОГИ

• Концептуальне знання основ аналітики даних, наприклад, розмірного моделювання, ETL/ELT, інструментів звітності, керування даними, сховища даних, структурованих і неструктурованих даних

• Глибокі знання SQL і досвід роботи з RDBMS, впевнений знання основ баз даних

• Досвід розробки баз даних і моделювання даних, в ідеалі з Databricks/Spark

• Досвід роботи з Python

• Досвід роботи з Azure

• Практичні знання про формати серіалізації та їхні компроміси (у стовпцях чи на основі рядків)

• Досвід налагодження та оптимізації завдань Spark

• Сильна письмова та усна комунікація навички

• Принаймні рівень англійської мови Upper-Intermediate

• Ступінь бакалавра з комп’ютерних наук або суміжної галузі

• Досвід роботи з інструментом бізнес-аналітики є nice-to-have. p>

ЗАМОВНИК

Sigma Software надає високоякісні послуги з розробки програмного забезпечення, графічного дизайну, тестування та підтримки. Системи, розроблені для забезпечення потреб клієнтів в автомобільній, телекомунікаційній, авіаційній, рекламній, ігровій, банківській сферах, нерухомості та охороні здоров'я.

ПРОЄКТ

У рамках внутрішнього проєкту в Sigma Software ми маємо дві основні цілі: автоматизувати звітність і створити систему самообслуговування для аналізу даних для нашої компанії.

Ти відповідатимеш за розробку та моделювання даних у DWH і Data Marts за допомогою Spark і MS SQL, надання цих даних BI-інженерам та співпрацю з ними, створення звітів у Apache Superset та інші задачі, що стосуються використання цих даних. Крім того, ти працюватимеш з іншими членами команди, які використовують ці дані. Також частиною твоєї роботи буде перенесення нашого локального рішення в хмарне середовище.

ОБОВ'ЯЗКИ

Наша мета – створити ефективну систему для збору, обробки, аналізу та візуалізації великих обсягів даних із різних джерел

• Створити основу та моделювати дані

• Розробляти платформу для побудови та підтримки конвеєрів даних, які збирають дані з різних джерел

• Створити сховище даних

• Аналізувати та готувати описи доменів у співпраці з бізнес-аналітиками

• Створювати вітрини даних

• Розробити модель дозволів із гнучким керуванням вертикальним і горизонтальним доступом до даних

ВИМОГИ

• Концептуальне знання основ аналітики даних, наприклад, розмірного моделювання, ETL/ELT, інструментів звітності, управління даними, сховищ даних, структурованих і неструктурованих даних

• Глибокі знання SQL і досвід роботи з RDBMS, впевнене знання основ баз даних

• Досвід розробки баз даних і моделювання даних, в ідеалі з Databricks/Spark

• Досвід роботи з Python

• Практичні знання про формати серіалізації та їхні компроміси (стовпчикові vs. рядкові)

• Досвід налагодження та оптимізації завдань Spark

• Сильні навички письмової та усної комунікації

• Рівень володіння англійською мовою не нижче Upper-Intermediate

• Ступінь бакалавра в галузі комп'ютерних наук або суміжних галузях

Досвід роботи з інструментом бізнес-аналітики – буде плюсом