Сильный инженер по обработке данных среднего звена с Python в Intellias

Сильный инженер по обработке данных среднего звена со знанием Python. Погрузитесь глубоко в цифровые технологии! На протяжении 20 лет Intellias разрабатывает цифровые решения высшего уровня для ведущих компаний мира, следуя последним технологическим тенденциям. Присоединяйтесь и создайте инновации для будущего! Какой проект у нас есть для вас? Наш клиент — ведущая компания по планированию пенсионных продуктов в США. Они выполнили подъем и перенос SQL Server 2008 в базу данных SQL Azure (MI) и разработали новую архитектуру на основе облачных сервисов. Наш проект поможет им проверить и внедрить новую архитектуру на основе облачных сервисов. Что вы будете делать Сотрудничайте с заинтересованными сторонами бизнеса и техническими группами, чтобы понять и проанализировать требования к данным. Поддержка проектирования и реализации моделей данных и структур баз данных, отвечающих потребностям бизнеса. Профилируйте, рефакторируйте и оптимизируйте производительность систем баз данных. Внедряйте процессы ETL для извлечения, преобразования и загрузки данных из различных исходных систем в хранилище данных. Обеспечьте целостность, согласованность и точность данных с помощью мер обеспечения качества данных. Анализируйте и поддерживайте членов команды, предоставляя рекомендации и наставничество. Что вам для этого нужно. Необходимые навыки: более 3 лет практического опыта разработки данных с использованием Python и SQL. Опыт работы с Azure, сервисами DWH (Databricks), облачным хранилищем (Azure Storage) от 2 лет. Большой опыт работы с инструментами ETL/ELT/оркестрации (например, Airflow, ADF, Glue, Nifi). Внесите свой вклад в проектирование и внедрение хранилищ данных и озер данных. Хорошее знание управления версиями кода (git) и построения CI/CD для проектов данных. Сбор и документация требований к воздействию. Будет плюсом: Опыт работы с NoSQL. Опыт потоковой обработки (например, Apache Kafka, Apache Flink, Spark Structured Streaming). Что значит работать в Intellias? Возможность работать с американским клиентом и способствовать модернизации инфраструктуры данных. В Intellias мы стремимся быть работодателем равных возможностей, способствуя равенству, многообразию и инклюзивности. Мы приветствуем и отмечаем различия всех квалифицированных кандидатов. Присоединяйтесь к Intellias для карьеры, где ваши уникальные взгляды не только ценятся, но и имеют решающее значение для нашего успеха.