Senior Big Data Engineer bei OpenX in OpenX

Sie arbeiten in allen Aspekten der agilen Anwendungsentwicklung, einschließlich unserer Unternehmensplattform, die mit einer Vielzahl von Diensten verbunden ist, die darauf angewiesen sind, Milliarden von Anfragen pro Tag zu liefern. Ihre Meinung wird in allen Phasen der Produktentwicklung wichtig sein, angefangen bei den Anforderungen bis hin zur Validierung und Bereitstellung. Bei der Arbeit auf der Unternehmensplattform arbeiten Sie mit mehreren verteilten Teams zusammen, um neue Features und Funktionen zu entwerfen, zu erstellen und bereitzustellen, um das bestmögliche Werbeerlebnis auf dem Markt zu bieten. Skalierbarkeit, Leistung und absolute Zuverlässigkeit sind Faktoren, die Sie bei jeder Codezeile berücksichtigen müssen.

Das Team und das Projekt:
Sie werden Teil des Kerndatenentwicklungsteams sein. Unsere Börse verarbeitet täglich Milliarden von Anzeigenanfragen und verbindet Tausende von Publishern mit Nachfragepartnern. Jede Anfrage erzeugt Datenereignisse, die verarbeitet werden müssen, um daraus geschäftlichen Nutzen zu ziehen. Täglich produzieren unsere Anwendungen mehr als 1 PB an Daten.

• 8+ Jahre Erfahrung in der Java-, Scala- oder Python-Entwicklung
• 3+ Jahre Erfahrung in der Entwicklung von Big-Data-Systemen
• Erfahrungsaufbau komplexe Datenpipelines mit Datentransformationstools wie DBT oder Dataform und SQL.
• Fachkenntnisse im Umgang mit BigQuery oder anderen Data Warehouses, einschließlich Leistungsoptimierung und -überwachung.
• Versteht Datenorchestrierungstools wie Airflow, um sie mit neuen Datenpipelines zu erweitern und betriebliche Probleme zu beheben.
• Cloud-Erfahrung mit Google Cloud Platform oder AWS, k8s und Docker.
• Verständnis von CI/CD, automatisierten Tests, Überwachung und anderen DevOps-Praktiken.
• Sprechen Sie fließend über Algorithmen, Datenstrukturen und Plattformen.
• Erfahrung mit Datenbanksystemdesign, RDBMs und/oder NoSQL.
• Bachelor-Abschluss in Informatik, Physik oder einem verwandten Bereich. Ein Masterabschluss ist von Vorteil.
• Kommunikatives Polnisch und Englisch.

Sie arbeiten in allen Aspekten der agilen Anwendungsentwicklung, einschließlich unserer Unternehmensplattform, die mit einer Vielzahl von Diensten verbunden ist, die darauf angewiesen sind, Milliarden von Anfragen pro Tag zu liefern. Ihre Meinung wird in allen Phasen der Produktentwicklung wichtig sein, angefangen bei den Anforderungen bis hin zur Validierung und Bereitstellung. Bei der Arbeit auf der Unternehmensplattform arbeiten Sie mit mehreren verteilten Teams zusammen, um neue Features und Funktionen zu entwerfen, zu erstellen und bereitzustellen, um das bestmögliche Werbeerlebnis auf dem Markt zu bieten. Skalierbarkeit, Leistung und absolute Zuverlässigkeit sind Faktoren, die Sie bei jeder Codezeile berücksichtigen müssen.

Das Team und das Projekt:
Sie werden Teil des Kerndatenentwicklungsteams sein. Unsere Börse verarbeitet täglich Milliarden von Anzeigenanfragen und verbindet Tausende von Publishern mit Nachfragepartnern. Jede Anfrage erzeugt Datenereignisse, die verarbeitet werden müssen, um daraus geschäftlichen Nutzen zu ziehen. Täglich produzieren unsere Anwendungen mehr als 1 PB an Daten.

,[Entwerfen Sie große Datenverarbeitungssysteme., Arbeiten Sie mit dem Produkt zusammen, um die Anforderungen voranzutreiben, und übernehmen Sie die Verantwortung für das Projekt durchgängig., Analysieren und verbessern Sie die Effizienz, Skalierbarkeit und Stabilität von AnwendungenKationen., Denken Sie langfristig und geben Sie sich mit Pflastern nicht zufrieden., Identifizieren Sie unnötige Komplexität und beseitigen Sie sie.]

Anforderungen: Scala, Cloud, Kubernetes, Java, SQL, Docker, Spark, Jenkins, Hadoop, Data Engineering, Python
Tools: Jira, Confluence, GitHub, GIT, Jenkins, Cloud Build, Agile, Scrum.
Zusätzlich: Private Gesundheitsversorgung, flache Struktur, Mittagskarte, kleine Teams, Multikafeteria, Lebens- und Gruppenversicherung, Linkedin Learning, internationale Projekte, kostenloser Kaffee, Kantine, Fahrradabstellplatz, Spielzimmer, Dusche, Kostenlose Snacks, kostenlose Getränke, kostenloses Mittagessen, kostenlose Parkplätze, modernes Büro, keine Kleiderordnung.