Старший інженер з даних в GlobalLogic

Ви станете частиною команди, яка розробляє цифрові інструменти для співпраці з функціями, що дозволяють перевести з аналогового в цифровий. Ви будете працювати з дуже відомим брендом. Поточна увага зосереджена на програмах, створених для використання в Microsoft Teams і мобільних програмах iOS/Android. Відставання продукту стосується широкого спектру технологій і потреб бізнесу. Цей рік зосереджений на глобальній масштабованості, відповідності та нових функціях UX. Продукт повністю складається зі стеку технологій Azure та сховищ коду GitHub і працює за допомогою процесів Agile Scrum. Це найкраща цифрова ініціатива для компанії та весела команда, над якою можна працювати! Вимоги: Мінімальні вимоги: - Мінімум 4 роки досвіду роботи з мовами програмування SQL і Python, зокрема для завдань інженерії даних. - Вміння працювати з хмарними технологіями, такими як як Azure або AWS.- Досвід роботи зі Spark і Databricks або подібними платформами обробки великих даних і аналітики- Досвід роботи з великими середовищами даних, включаючи обробку даних, інтеграцію даних і сховище даних.- Досвід оцінки якості даних і технік покращення, включно з даними профілювання, очищення та перевірка даних.- Знайомство з озерами даних і пов’язаними з ними технологіями, такими як Azure Data Lake Storage, AWS S3 або Delta Lake, для масштабованого та економічно ефективного зберігання та керування даними.- Досвід роботи з базами даних NoSQL, такі як MongoDB або Cosmos, для роботи з неструктурованими та напівструктурованими даними. Додаткові навички (приємно мати):- Знайомство з методологіями Agile та Scrum, включаючи роботу з Azure DevOps і Jira для управління проектами.- Знання методологій і практик DevOps, включаючи безперервну інтеграцію та безперервне розгортання (CI/CD).- Досвід роботи з Azure Data Factory або подібними інструментами інтеграції даних для оркестрування та автоматизації конвеєрів даних.- Здатність створювати та підтримувати API для інтеграції та споживання даних.- Досвід роботи з даними для програмного забезпечення. платформ, включаючи розробку баз даних, оптимізацію та налаштування продуктивності. Обов’язки: - Відповідає за створення, розгортання та підтримку критично важливих аналітичних рішень, які швидко обробляють дані в масштабах великих даних - Відповідає за розробку та реалізацію конвеєрів інтеграції даних - Розробка, код, конфігурації та документація для компонентів, які керують надходженням даних, потоковою передачею в реальному часі, пакетною обробкою, витягом даних, перетворенням і завантаженням у кількох сховищах даних. Беріть участь у повному циклі розробки функцій (аналіз вимог, декомпозиція, дизайн тощо)- Проектуйте, розробляйте та впроваджуйте різні веб- та серверні рішення разом з іншими талановитими інженерами в середовищі спільної команди.- Сприяйте загальній якості послуг розробки шляхом мозкового штурму, модульного тестування та проактивної пропозиції різних вдосконалення та інновації.