Инженер данных в CHI Software

Data Engineer Харьков, Львов, Барселона (Испания), Краков (Польша), удалено Команда CHI Software не стоит на месте. Мы любим свою работу и отдаемся ей на сто процентов! Каждый новый проект — это вызов, с которым мы успешно справляемся. Единственное, что может нас остановить, это... Подождите, это пустяки! Количество проектов растёт, а вместе с ними и наша команда. И сейчас нам нужен старший инженер по данным. Мы ищем квалифицированного и опытного инженера по обработке данных. Идеальный кандидат будет активно участвовать в поиске, анализе и сборке больших и сложных наборов данных. Они будут проектировать и создавать нашу инфраструктуру больших данных, обеспечивать безопасность данных и оптимизировать производительность наших платформ больших данных, в первую очередь в облачной среде AWS. Требования: более 3 лет опыта построения, оптимизации и обслуживания конвейеров и архитектур больших данных; Уверенное владение Python; Практический опыт построения конвейеров ETL в среде AWS; Знакомство с сервисами AWS, такими как AWS Lambda, Amazon EventBridge, Amazon S3, Amazon Kinesis и AWS Step Functions; Опыт работы со стеком ELK или платформами OpenSearch; Глубокое понимание безопасности данных и реализации контроля доступа на облачной платформе AWS; Четкое понимание концепций архитектуры хранилища данных. Обязанности: Обнаружение, анализ и сбор больших и сложных наборов данных для удовлетворения функциональных и нефункциональных бизнес-требований; Проектировать, создавать, оптимизировать и поддерживать надежные конвейеры, архитектуры и наборы данных «больших данных»; Создавайте масштабируемые конвейеры ETL для различных источников данных с помощью Python в экосистеме AWS; Взаимодействуйте с сервисами AWS, включая AWS Lambda, Amazon EventBridge, Amazon S3, Amazon Kinesis и AWS Step Functions; Внедрять и управлять стеком ELK или платформами на базе OpenSearch; Обеспечить надежные меры безопасности данных и средства контроля доступа в нашей инфраструктуре данных AWS; Сотрудничать с членами команды для улучшения существующих систем, оптимизации процессов и реализации инициатив, связанных с данными; Понимать и использовать архитектуру хранилищ данных для достижения оптимальной производительности; Устранять и решать проблемы с данными, обеспечивая точность и надежность данных; Эффективно сотрудничайте с межфункциональными командами, представляя результаты и аналитическую информацию, когда это необходимо. Наши льготы Период отпуска: 20 рабочих дней и 5 выходных. Бесплатные занятия английским языком. Гибкий график работы. По-настоящему дружелюбная и поддерживающая атмосфера. Работаем удаленно или в одном из наших офисов. Медицинская страховка для сотрудников из Украины. Компенсация психологических консультаций. Юридическая поддержка. Помощь в переезде.