Инженер по обработке данных (средний/старший) в Addepto

Мы Addepto, где вы можете почувствовать атмосферу стартапа! Мы считаем, что единственная константа в жизни – это перемены, поэтому стараемся продолжать развиваться и совершенствоваться, чтобы каждый день становиться лучше в том, что мы делаем! Мы действуем нестандартно, создаем и поставляем лучшие решения в области больших данных, машинного обучения и искусственного интеллекта. Наша удаленная команда, базирующаяся в Варшаве, ищет старшего инженера по обработке данных, специализирующегося в основном на проектировании и построении архитектуры обработки данных. Некоторые из наших недавних проектов по работе с большими данными: Озера данных, в которых хранятся терабайты данных и обрабатываются задачи машинного обучения для крупной телекоммуникационной компании. Потоковая передача приложений на сервер для анализа данных в режиме реального времени для производственных компаний. Системы, которые поддерживают процесс принятия решений и помогают анализировать данные. в едином формате для отделов контроля и эксплуатации. Поддержка прогнозирования машинного обучения в реальном времени на больших наборах данных, что предотвращает потери фармацевтических компаний. И многое другое! Что мы предлагаем: Работа в слаженной команде страстных энтузиастов больших данных и искусственного интеллекта. Быстрый карьерный путь и возможность повысить свою квалификацию благодаря спонсорству тренингов, конференций и многим другим возможностям развития в различных областях. Амбициозные международные проекты для клиентов со всего мира. и инновационные стартапы. Дружелюбная атмосфера, выдающиеся люди и отличная культура – ​​автономия и благоприятная рабочая среда имеют решающее значение для нас. Гибкий график работы – вы можете настроить свой график так, чтобы он лучше соответствовал вашему распорядку дня. Возможность как удаленной, так и офисной работы – современный офис. доступны места в Варшаве, Кракове, Вроцлаве, Белостоке или коворкинг в любом месте в Польше, если это необходимо. Любая форма занятости – мы предлагаем B2B, трудовой договор или договор поручения. Оплачиваемый отпуск – 20 полностью оплачиваемых выходных, если вы выбираете B2B или договор поручения. мандат Другие льготы – например, отличные мероприятия по формированию команды, языковые курсы, тренинги и семинары, занятия по обмену знаниями, медицинские и спортивные пакеты и др. Обязанности: Проектирование и построение масштабируемой архитектуры обработки данных. Использование технологий Big Data и BI (Spark, Hadoop). Создание приложения, которое будет агрегировать, обрабатывать и анализировать данные из различных источников. Сотрудничество с отделом Data Science в области проектов машинного обучения (включая анализ текста/изображений, построение прогнозных моделей). Управление распределенными системами баз данных, такими как ClickHouse, BQ, Teradata, Oracle Exadata, PostgreSQL + CitusModeling, схемы Star и Snowflake. Разрабатывать и организовывать преобразования данных в DBT и Apache Airflow. Переводить требования бизнеса и переводить их в технический код. Обеспечивать максимально возможную производительность и качество пакетов. Управлять ожиданиями бизнес-пользователей. Требования: Высшее образование в области технических и математических исследований. (или последний год обучения) Коммерческий опыт внедрения, разработки или обслуживания систем бизнес-аналитики или больших данных. Знание Python (или Java/Scala). Практический опыт работы в Spark, Cloudera, Data Platform, Airflow, NiFi. Знакомство с NiFi. с технологиями Big Data (Databricks, Docker, Kubernetess, Iceberg, Trino, Hudi) Хорошее знание английского языка (мин. B2+) Опыт работы с облачными сервисами (AWS, Azure или GCP) Независимость и ответственность за предоставление решения Отличные знания в области многомерных данных Хорошие коммуникативные и мягкие навыки Ведение дискуссий, сессий требований, должны быть в состоянии понять, обобщить и завершить требования Вы заинтересованы в Аддепто и хотели бы присоединиться к нам? Связаться! Мы с нетерпением ждем вашей заявки. Хотите узнать о нас больше? Посетите наш веб-сайт (страницу карьеры) и социальные сети (Facebook, LinkedIn).