Big-Data-Ingenieur in RecruitGarden

Möchten Sie die Welt des digitalen Lesens verändern? Treten Sie der Plattform mit über 1 Million Titeln und 60 Millionen Dokumenten bei. Tauchen Sie ein in die Herausforderungen der App-Skalierung, Echtzeitdaten und maschinellen Lernens. Wir suchen einen Big Data Engineer, der gemeinsam etwas bewirken möchte. Remote + TOP-Bedingungen – lassen Sie uns darüber sprechen? Verantwortlichkeiten: – Datenqualität und -integrität verwalten – Unterstützung bei der Entwicklung von Tools und Technologien, um sicherzustellen, dass nachgelagerte Kunden Vertrauen in die Daten haben können, die sie verbrauchen – funktionsübergreifende Arbeit mit Data Science oder Content Engineering-Teams zur Fehlerbehebung, Verarbeitung oder Optimierung geschäftskritischer Pipelines – arbeiten mit Core Platform zusammen, um bessere Verarbeitungsjobs für die Skalierung der Nutzung von Streaming-Datensätzen zu implementieren. Anforderungen: – 3+ Jahre Erfahrung in der Datentechnik, die End-to-End erstellt oder verwaltet Datenpipelines für große, komplexe Datensätze. – Kenntnisse in Spark – Fachkenntnisse in Scala und/oder Python – Beherrschung mindestens eines SQL-Dialekts – Englischniveau: Obere Mittelstufe. Als Pluspunkt – Erfahrung mit Streaming-Plattformen, typischerweise basierend auf Kafka – Erfahrung in Terraform, Airflow – ausgeprägtes Verständnis der AWS-Datenplattformdienste und ihrer Stärken/Schwächen – ausgeprägte Erfahrung mit Jira, Slack, JetBrains IDEs, Git, GitLab, GitHub, Docker, Jenkins – Erfahrung mit DataBricksWir bieten: – hohe Vergütung entsprechend Ihrer Technische Fähigkeiten – langfristige Projekte (12 Monate+) mit großartigen Kunden – 5-Tage-Woche, 8-Stunden-Arbeitstag, flexibler Zeitplan – demokratischer Führungsstil und freundliches Umfeld – vollständig remote – jährlicher bezahlter Urlaub – 20 B/Tage + unbezahlter Urlaub – bezahlter Krankheitsurlaub – 6 B/Tage pro Jahr – 12 nationale Feiertage – Firmenvorteile (externe Schulungen, Englischkurse, Firmenveranstaltungen/Teambuildings) – berufliche und persönliche Weiterentwicklung