Середній інженер з обробки даних – віддалені @ Стратегічні кадрові рішення в Strategic Staffing Solutions

Strategic Staffing Solutions шукає інженера з обробки даних для підтримки глобального замовника в США в нафтовій і газовій промисловості. Повністю віддалений від Польщі з можливістю щорічної поїздки до штаб-квартири США. Інженер з обробки даних підтримуватиме наших розробників програмного забезпечення, архітекторів баз даних, аналітиків даних і спеціалістів із обробки даних у ініціативах із обробки даних і забезпечуватиме узгодженість оптимальної архітектури доставки даних у поточних проектах. Обов’язки інженера з обробки даних Створювати та підтримувати оптимальну архітектуру конвеєра даних, збирати великі складні набори даних, які відповідають функціональним/нефункціональним вимогам бізнесу. Визначайте, проектуйте та впроваджуйте вдосконалення внутрішніх процесів: автоматизація ручних процесів, оптимізація доставки даних, перепроектування інфраструктури для більшої масштабованості тощо. Створюйте інфраструктуру, необхідну для оптимального вилучення, перетворення та завантаження даних із різноманітних джерел даних за допомогою Технології великих даних SQL та AWS. Створюйте інструменти аналітики, які використовують конвеєр даних, щоб надавати практичну інформацію про залучення клієнтів, операційну ефективність та інші ключові показники ефективності бізнесу. Співпрацюйте з зацікавленими сторонами, включаючи керівників, команди продуктів, даних і дизайнерів, щоб допомогти вирішити технічні проблеми, пов’язані з даними, і підтримати їхні потреби в інфраструктурі даних. Створюйте інструменти обробки даних для членів команди аналітиків і спеціалістів із обробки даних, які допомагають їм створювати та оптимізувати наш продукт у лідера інноваційної галузі. Працюйте з експертами з даних і аналітики, щоб прагнути до кращої функціональності наших систем даних. Кваліфікація інженера з обробки даних Поглиблені робочі знання SQL і досвід роботи з реляційними базами даних, створенням запитів (SQL), а також знайомство з різними базами даних. Досвід створення та оптимізації каналів, архітектур і наборів даних для великих даних. Досвід проведення аналізу першопричин внутрішніх і зовнішніх даних і процесів, щоб відповісти на конкретні бізнес-питання та визначити можливості для вдосконалення. Сильні аналітичні навички, пов’язані з роботою з неструктурованими наборами даних. Створюйте процеси, що підтримують перетворення даних, структури даних, метадані, керування залежностями та робочим навантаженням. Успішна історія маніпулювання, обробки та вилучення цінності з великих відключених наборів даних. Практичні знання черги повідомлень, потокової обробки та високомасштабованих сховищ великих даних. Сильний менеджмент проектів та організаційні навички. Досвід підтримки та роботи з міжфункціональними командами в динамічному середовищі. Інженер з обробки даних приєднається до команди з інтеграції лінійки продуктів для обслуговування поверхонь і інспекції, щоб створювати та вдосконалювати надійні рішення для інтеграції даних для кращої підтримки інших груп продуктів. Досвід отримання, підготовки та перевірки даних, переміщення та трансформації даних у хмарі Azure для інтеграції даних і процесів ETL. Досвід роботи з хмарними службами Azure, зокрема Azure SQL Database, Azure Blob Storage, Azure Data Lake, Azure Data Factory, Azure Synapse. Володіння технологіями великих даних, такими як Spark, Hadoop або Kafka Значний досвід роботи з SQL і рішеннями для сховищ даних. Добре володію мовою програмування, наприклад Python для обробки даних. Знайомий зКонвеєр ADO CICD і ансібль. Strategic Staffing Solutions шукає інженера з обробки даних для підтримки глобального замовника в США в нафтовій і газовій промисловості. Повністю віддалений від Польщі з можливістю щорічної поїздки до штаб-квартири США. Інженер з обробки даних підтримуватиме наших розробників програмного забезпечення, архітекторів баз даних, аналітиків даних і спеціалістів із обробки даних у ініціативах із обробки даних і забезпечуватиме узгодженість оптимальної архітектури доставки даних у поточних проектах. Обов’язки інженера з обробки даних Створювати та підтримувати оптимальну архітектуру конвеєра даних, збирати великі складні набори даних, які відповідають функціональним/нефункціональним вимогам бізнесу. Визначайте, проектуйте та впроваджуйте вдосконалення внутрішніх процесів: автоматизація ручних процесів, оптимізація доставки даних, перепроектування інфраструктури для більшої масштабованості тощо. Створюйте інфраструктуру, необхідну для оптимального вилучення, перетворення та завантаження даних із різноманітних джерел даних за допомогою Технології великих даних SQL та AWS. Створюйте інструменти аналітики, які використовують конвеєр даних, щоб надавати практичну інформацію про залучення клієнтів, операційну ефективність та інші ключові показники ефективності бізнесу. Співпрацюйте з зацікавленими сторонами, включаючи керівників, команди продуктів, даних і дизайнерів, щоб допомогти вирішити технічні проблеми, пов’язані з даними, і підтримати їхні потреби в інфраструктурі даних. Створюйте інструменти обробки даних для членів команди аналітиків і спеціалістів із обробки даних, які допомагають їм створювати та оптимізувати наш продукт у лідера інноваційної галузі. Працюйте з експертами з даних і аналітики, щоб прагнути до кращої функціональності наших систем даних. Кваліфікація інженера з обробки даних Поглиблені робочі знання SQL і досвід роботи з реляційними базами даних, створенням запитів (SQL), а також знайомство з різними базами даних. Досвід створення та оптимізації каналів, архітектур і наборів даних для великих даних. Досвід проведення аналізу першопричин внутрішніх і зовнішніх даних і процесів, щоб відповісти на конкретні бізнес-питання та визначити можливості для вдосконалення. Сильні аналітичні навички, пов’язані з роботою з неструктурованими наборами даних. Створюйте процеси, що підтримують перетворення даних, структури даних, метадані, керування залежностями та робочим навантаженням. Успішна історія маніпулювання, обробки та вилучення цінності з великих відключених наборів даних. Практичні знання черги повідомлень, потокової обробки та високомасштабованих сховищ великих даних. Сильний менеджмент проектів та організаційні навички. Досвід підтримки та роботи з міжфункціональними командами в динамічному середовищі. Інженер з обробки даних приєднається до команди з інтеграції лінійки продуктів для обслуговування поверхонь і інспекції, щоб створювати та вдосконалювати надійні рішення для інтеграції даних для кращої підтримки інших груп продуктів. ,[Проектування, створення та підтримка масштабованих сховищ даних і рішень для великих даних за допомогою Azure Synapse Analytics., Розробка та оптимізація конвеєрів даних, інтегруючи різні джерела даних у Synapse., Відстеження продуктивності системи та виконання налаштування продуктивності запитів для запитів великих даних, усунення несправностей проблеми та забезпечити надійність системи та точність даних.] Вимоги: Azure Cloud, ETL, Azure SQL Database, Blob Storage, Azure Data Lake, Azure Data Factory, Azure Synapse, Big data, Spark, Hadoop, Kafka, SQL, Data warehouse, Python, CI/CD Pipelines, Ansible, Azure Додатково: бюджет на навчання.