Средний/старший инженер по обработке данных в N-iX

Мы ищем активного инженера по обработке данных среднего/старшего уровня, который присоединится к нашей динамичной команде. В качестве инженера по данным вы будете играть решающую роль в проектировании, разработке и обслуживании сложных конвейеров данных, объектов онтологий и функций Foundry в Palantir Foundry. Идеальный кандидат будет обладать обширным опытом работы в облачных технологиях, архитектуре данных и страстью к решению сложных задач, связанных с данными. Основные обязанности: Сотрудничать с межфункциональными командами для понимания требований к данным, а также проектировать, внедрять и поддерживать масштабируемые конвейеры данных в Palantir Foundry. , обеспечивая сквозную целостность данных и оптимизируя рабочие процессы. Собирайте и преобразуйте требования к данным в надежные и эффективные решения, используя свой опыт в облачной инженерии данных. Создавайте модели данных, схемы и блок-схемы для руководства разработкой. Разрабатывайте, внедряйте, оптимизируйте и поддерживайте эффективные и надежные конвейеры данных и процессы ETL/ELT для сбора, обработки и интеграции данных, чтобы обеспечить своевременную и точную доставку данных в различные бизнес-приложения. одновременно внедряя передовые методы управления данными и безопасности для защиты конфиденциальной информации. Отслеживайте производительность конвейера данных, выявляйте узкие места и внедряйте улучшения для оптимизации скорости обработки данных и сокращения задержек. Устраняйте неполадки и решайте проблемы, связанные с конвейерами данных, обеспечивая непрерывную доступность и надежность данных для поддержки процессов принятия решений на основе данных. Будьте в курсе новых технологий и отраслевых тенденций, внедряя инновационные решения в практику обработки данных, а также эффективно документируйте и распространяйте технические решения и Инструменты и навыки, которые вы будете использовать в этой роли: Palantir FoundryPythonPySparkSQLTypeScriptТребования: 3+ года опыта работы в области разработки данных, предпочтительно в фармацевтической или медико-биологической отрасли. Уверенное знание Python и PySpark. Владение технологиями больших данных (например, Apache Hadoop). , Spark, Kafka, BigQuery и т. д.).Практический опыт работы с облачными сервисами (например, AWS Glue, Azure Data Factory, Google Cloud Dataflow).Опыт моделирования данных, хранилищ данных и концепций ETL/ELT.Практический опыт. Опыт работы с системами баз данных (например, PostgreSQL, MySQL, NoSQL и т. д.). Знание технологий контейнеризации (например, Docker, Kubernetes). Навыки эффективного решения проблем и аналитические навыки в сочетании с отличными коммуникативными способностями и способностями к сотрудничеству. Сильные коммуникативные способности и способности к командной работе. .Понимание лучших практик безопасности и конфиденциальности данных.Сильные математические, статистические и алгоритмические навыки.Приятно иметь:Сертификацию по облачным платформам или смежным областям.Опыт работы с поисковой системой Apache Lucene, Webservice Rest API.Знакомство с Veeva CRM, Reltio, SAP и/или Palantir Foundry. Знание нормативных актов фармацевтической отрасли, таких как законы о конфиденциальности данных, является преимуществом. Предыдущий опыт работы с JavaScript и TypeScript. Мы предлагаем: Гибкий формат работы — удаленно, в офисе или гибкий. Конкурентоспособную заработную плату и хорошую компенсацию. пакетПерсонализированный карьерный ростИнструменты профессионального развития (программа наставничества, технические переговоры и тренинги, центры передового опыта и многое другое))Active tech communities with regular knowledge sharingEducation reimbursementMemorable anniversary presentsCorporate events and team buildingsOther location-specific benefits Show more Show less Должностный уровень Старший средний уровень Тип занятости Полный рабочий день Должностные обязанности Информационные технологии Отрасли Технология, информация и интернет