Інженер великих даних в lifecell

Про посаду: На цій посаді ви працюватимете з даними про активність клієнтів в одному з найбільших операторів зв'язку на ринку. Ви розроблятимете процеси ETL і конвеєри даних на платформах даних: Data Warehouse, BI та системи звітності та Hadoop Data Platform. Ви братимете участь у розробці та інтеграції продуктів і послуг, що керуються даними, для внутрішніх і B2B-клієнтів. Обов’язки: працювати з аналітиками та зацікавленими сторонами, щоб роз’яснити їхні вимоги. Розробляти процеси ETL, впроваджувати нові або розширювати існуючі вітрини даних. Проектувати та розробляти конвеєри обробки даних на платформі даних Hadoop. , як для пакетного, так і для потокового режимів. Брати участь у впровадженні та інтеграції нових джерел даних. Розробляти API для інтеграції зовнішніх систем із платформами даних. Виконувати аналіз основних причин проблем з конвеєрами даних, виправляти помилки та налаштовувати продуктивність. Підвищувати якість даних і керувати SLA для платформ даних. Мінімальна кваліфікація: 3 + роки досвіду в якості інженера даних або розробника баз даних. Досвід роботи з RDBMS, такими як Oracle або MySQL, досвід розробки та налаштування продуктивності SQL і PL/SQL. Знання концепцій сховищ даних і досвід розробки ETL. Вміння Python. Досвід роботи з такими технологіями великих даних, як Hadoop, Spark, Hive, Kafka, HBase, Sqoop та інші інструменти. Досвід впровадження конвеєрів машинного навчання за допомогою Spark ML або Scikit-learn буде перевагою. Досвід у сфері телекомунікацій буде перевагою. Хороші аналітичні навички та навички вирішення проблем