Старший інженер з даних в EPAM Systems, Inc.

Опис старшого інженера з даних

Ми шукаємо досвідченого старшого інженера з обробки даних , щоб приєднатися до нашої команди.

Проект передбачає розробку та оптимізацію нової платформи даних для налаштування нашої поточної системи обробки даних. Старший інженер з даних відповідатиме за розробку, впровадження та підтримку платформи для задоволення потреб бізнесу в даних.

Дистанційний варіант поширюється лише на Кандидатів, які працюватимуть з будь-якої точки України.

Обов’язки

• Розробка конвеєрів обробки даних за допомогою Azure Data Factory і функцій Azure
• Реалізуйте процеси прийому та перетворення даних за допомогою Databricks і PySpark
• Напишіть ефективний код на Python і SQL для видобування, перетворення та завантаження даних
• Співпрацюйте із зацікавленими сторонами для збору вимог і забезпечити, щоб платформа відповідала бізнес-потребам
• Моніторинг і усунення несправностей продуктивності платформи та вирішення будь-яких проблем
• Запровадження заходів із забезпечення якості даних і вдосконалення процесів
• Оптимізація зберігання та пошуку даних операції
• Проводити аналіз даних і генерувати ідеї для прийняття рішень
• Навчати та наставляти молодших інженерів даних
• Участь у експертному аналізі коду та спільної діяльності команди
• li>

Вимоги

• 3+ роки практичного досвіду роботи у сфері великих даних і експертиза в розробці програмного забезпечення даних
• Сильні знання та досвід з Azure Data Factory, функціями Azure та Databricks
• Вміння працювати з PySpark, Python і SQL
• Розуміння пакетної обробки та принципів ETL у сховищах даних
• Досвід із сигналами повноти даних і оркестровкою
• Знання міграції схем і еволюції наборів даних
• Знайомство з підходами до історичної повторної обробки та виправлення даних
• Хороші навички вирішення проблем і спілкування
• Досконале володіння англійською на рівні B2+, хороше володіння англійською

Приємно мати

• Знайомство з Microsoft Power BI
• Компетентність у Azure Blob Storage, Azure File Storage

Ми пропонуємо

• Віддалену роботу за гнучким графіком або з будь-якого з наших комфортних офісів або коворкінги в Україні
• Отримайте необхідне обладнання для виконання своїх робочих завдань
• Змініть проекти та стеки технологій у EPAM
• Отримайте досвід у різних сферах бізнесу (страхування, Електронна комерція, охорона здоров’я, фінанси, подорожі, ЗМІ, штучний інтелект тощо)
• Розгляньте варіанти переїзду в понад 30 країнах світу
• Беріть участь у волонтерських, благодійних програмах і спільнотах (як технічні та на основі інтересів)
• Ви можете спланувати свій індивідуальний кар’єрний шлях разом зі своїм керівником
• Регулярно отримуйте відгуки від колег
• Покращуйте свою англійську безкоштовно за допомогою сертифікованого викладачі (Speaking Clubs, курси підготовки до співбесіди з клієнтами тощо).)
• Отримайте можливість пройти безкоштовне навчання та сертифікацію в AWS, GCP або Azure Clouds
• Використовуйте внутрішню навчальну програму E-learn (понад 18 200 спеціалізованих навчальних і наставницьких програм)< /li>
• Отримайте доступ до корпоративних облікових записів на LinkedIn Learning, Get Abstract та інших ресурсах партнерів
• Навчайтеся в Школі архітектури рішень EPAM з викладачами, які є архітекторами-практиками
• Розвивайтеся як лідер , приєднатися до управління доставкою, управління ресурсами, школи Leadership Essentials тощо.
• Беріть участь у внутрішніх спільнотах (понад 500 зустрічей, технічних обговорень, мозкових штурмів, онлайн-заходів і конференцій щорічно)
• Відпустка та лікарняний (включаючи лікарняний без медичної довідки)
• Широкий спектр програм добровільного медичного страхування, що передбачає як лікування, так і різні варіанти профілактики (включаючи спортивні заняття)
• Медичне страхування для членів сім'ї за корпоративними тарифами
• Підтримка компанії під час важливих життєвих подій (народження дитини чи усиновлення, одруження тощо)
• Підтримка психологічного комфорту: знижки на послуги психологів або тренерів, тематичний тренінг
• Програма E-kids – безкоштовна програма навчання мовам програмування для дітей EPAMers

EPAM прагне забезпечити свою глобальну команду з понад 52 800 професіоналів у більш 55 країн з можливостями професійного зростання з першого дня співпраці. Наші колеги є джерелом успіху EPAM, тому ми цінуємо співпрацю, прагнемо завжди розуміти бізнес наших клієнтів і прагнемо до найвищих стандартів якості. Незалежно від того, де ви знаходитесь, ви приєднаєтесь до відданої, різноманітної спільноти, яка допоможе вам максимально реалізувати свій потенціал.