Старший инженер по данным Python (SK-1256) в Nortal

Nortal приглашает опытного старшего инженера по Python (данные) присоединиться к проектной команде нашего клиента — международного гиганта горнодобывающей отрасли! Компания переосмысливает и оцифровывает процесс добычи полезных ископаемых, используя новейшие и самые инновационные ИТ-технологии, чтобы создать устойчивую ценность в рамках интегрированной цепочки создания стоимости. О нашем клиентеНаш клиент — глобальная горнодобывающая компания с портфелем продуктов мирового класса, которые ежедневно используют миллиарды потребителей. Наш клиент полагается на данные и передовую науку о данных для улучшения своей деятельности. Они также используют передовое машинное обучение и искусственный интеллект для оптимизации своих процессов. О проектеНаш клиент — гигантская корпорация со штатом 90 000 сотрудников по всему миру. У них есть собственный инновационный ИТ-отдел, занимающийся всем циклом разработки продуктов, используемых организацией. Вы будете работать в международной команде экспертов над разработкой сложных программных решений, которые оказывают непосредственное влияние практически на все аспекты современной жизни. Вы будете использовать инновационные методы и новейшие технологии для доставки безопасных и экологически чистых продуктов своим клиентам по всему миру. Аналитика данных — это новая дисциплина в отделе технической поддержки и устойчивого развития нашего клиента. Компания собирается генерировать больше данных, чем когда-либо прежде, и ей необходимо создать системы для поддержки этого и принятия более эффективных решений. надежный поток данных в платформу данных организации. Разработка и поддержка многоразовых конвейеров обработки данных или ETL и кодовой базы с использованием Python, PySpark, Databricks, Airflow, API REST и облачной платформы Azure. Разработка и внедрение надежных API данных с использованием платформ Python, таких как FastAPI или Flask, и их развертывание в приложении Azure. ОбслуживаниеСотрудничайте с межфункциональными командами, чтобы понять требования к данным и предоставлять масштабируемые решения для инженерии данных. Проектирование и внедрение архитектур пакетной и потоковой передачи данных с использованием облачных служб Azure, таких как Azure Data Factory и Azure Databricks. Участие в разработке и развертывании Apache Airflow в службе Azure Kubernetes (AKS). Обеспечьте наилучшее соблюдение требований по разработке программного обеспечения. практики, включая контроль версий, тестирование и процессы непрерывной интеграции/непрерывного развертывания (CI/CD). Участвовать в проверках кода, технических обсуждениях и сеансах обмена знаниями внутри команды. Требования: Хороший опыт работы с языком программирования Python. Подтвержденный опыт работы с Apache Airflow и его развертываниями в Azure Kubernetes ServiceHands. -опыт работы с платформами Python, такими как FastAPI или Flask, и развертывание REST API в Службе приложений Azure. Хорошее понимание основных концепций и принципов обработки данных. Уверенный опыт работы с облачными службами Azure, включая Azure Data Factory и Azure Databricks. Навыки написания кода PySpark для обработки и преобразования данных. Способность проектировать и реализовывать многократно используемые и масштабируемые данные. конвейеры обработки данных и кодовая база. Хорошее понимание методов разработки программного обеспечения, включая контроль версий, тестирование и непрерывное обновление.Интеграция/непрерывное развертывание (CI/CD)Опыт проектирования архитектур пакетной и потоковой передачи данных с использованием сервисов облачной платформы Azure. Навыки эффективного решения проблем и способность устранять сложные проблемы с инженерией данных. Стремление к постоянному обучению и постоянному обновлению отраслевых тенденций и лучших практик в области проектирования данных. Сильные навыки общения и сотрудничества. со знанием английского языка. Способность эффективно работать в командной среде, проводить обучение и документировать процессы. Приятно иметь: Знакомство с инструментами Python, такими как Pytest, tox, поэзия. Знакомство со средами тестирования Python, такими как pytest, и инструментами сборки, такими как Tox и Poiese. Опыт создания конвейеров CI/CD и работы с Git. базовые системы контроля версийЗнание технологий контейнеризации, таких как Docker и KubernetesNortal предлагаетСемейную среду и личное внимание к каждому специалистуПрямое сотрудничество с клиентами из Европы и США и их инновационными продуктамиКонкурентоспособная заработная плата и регулярные обзорыБаланс между работой и личной жизнью, которого вы заслуживаете: 24 рабочих дня оплачиваемых отпусковОплата обучения, финансируемые языковые курсы, сертификаты «Кафе льгот с различными категориями, такими как спорт, отдых, книги, топливо и т. д. Здравоохранение: 10 оплачиваемых больничных, медицинская страховка по требованию, прививки. Уютное рабочее место и возможности WFH. Захватывающие мероприятия и прекрасные подарки для вашей семьи. По запросу помощь в переезде в Польшу. В своем резюме, пожалуйста, сообщите нашим Компания использует ваши персональные данные.