Старший инженер по большим данным @ OpenX в OpenX

Вы будете работать во всех аспектах гибкой разработки приложений, включая нашу корпоративную платформу, которая взаимодействует со множеством сервисов, от которых зависит доставка миллиардов запросов в день. Ваше мнение будет важно на всех этапах разработки продукта, начиная от требований до проверки и развертывания. Работая над корпоративной платформой, вы будете работать с несколькими распределенными командами над проектированием, созданием и предоставлением новых функций и возможностей, чтобы обеспечить наилучший рекламный опыт на рынке. Масштабируемость, производительность и безупречная надежность — это факторы, которые следует учитывать при каждой строке кода.

Команда и проект:
Вы будете частью основной группы разработки данных. Наша биржа ежедневно обрабатывает миллиарды рекламных запросов, связывая тысячи издателей с партнерами по спросу. Каждый запрос создает события данных, которые необходимо обработать, чтобы извлечь из них ценность для бизнеса. Ежедневно наши приложения производят более 1 ПБ данных.

• 8+ лет опыта разработки на Java, Scala или Python
• 3+ года опыта разработки систем больших данных
• Накопление опыта сложные конвейеры данных с инструментами преобразования данных, такими как DBT или Dataform и SQL.
• Опыт использования BigQuery или других хранилищ данных, включая настройку и мониторинг производительности.
• Понимает инструменты оркестрации данных, такие как Airflow, чтобы расширять их с помощью новых конвейеров данных и устранять неполадки в работе.
• Работа в облаке с помощью Google Cloud Platform или AWS, k8s и Docker.
• Понимание CI/CD, автоматического тестирования, мониторинга и других практик DevOps.
• Свободно владею алгоритмами, структурами данных и платформами.
• Опыт проектирования систем баз данных, RDBM и/или NoSQL.
• Степень бакалавра в области компьютерных наук, физики или смежных областей. Степень магистра является плюсом.
• Коммуникативный польский и английский.

Вы будете работать во всех аспектах гибкой разработки приложений, включая нашу корпоративную платформу, которая взаимодействует со множеством сервисов, от которых зависит доставка миллиардов запросов в день. Ваше мнение будет важно на всех этапах разработки продукта, начиная от требований до проверки и развертывания. Работая над корпоративной платформой, вы будете работать с несколькими распределенными командами над проектированием, созданием и предоставлением новых функций и возможностей, чтобы обеспечить наилучший рекламный опыт на рынке. Масштабируемость, производительность и безупречная надежность — это факторы, которые следует учитывать при каждой строке кода.

Команда и проект:
Вы будете частью основной группы разработки данных. Наша биржа ежедневно обрабатывает миллиарды рекламных запросов, связывая тысячи издателей с партнерами по спросу. Каждый запрос создает события данных, которые необходимо обработать, чтобы извлечь из них ценность для бизнеса. Ежедневно наши приложения производят более 1 ПБ данных.

, [Разрабатывать крупномасштабные системы обработки данных. Работать с продуктом для удовлетворения требований и комплексно контролировать проект. Анализировать и повышать эффективность, масштабируемость и стабильность приложений.катионы. Думайте о долгосрочной перспективе и будьте недовольны пластырями. Определите ненужную сложность и устраните ее.]

Требования: Scala, Cloud, Kubernetes, Java, SQL, Docker, Spark, Jenkins, Hadoop, обработка данных, Python
Инструменты: Jira, Confluence, GitHub, GIT, Jenkins, Cloud Build, Agile, Scrum.
Дополнительно: Частное здравоохранение, Плоская структура, Ланч-карта, Небольшие команды, Мультикафетерий, Страхование жизни и групп, Linkedin Learning, Международные проекты, Бесплатный кофе, Столовая, Велопарковка, Игровая комната, Душ, Бесплатные закуски, Бесплатные напитки, Бесплатный обед, Бесплатная парковка, Современный офис, Без дресс-кода.