Leitender Python-Ingenieur (AWS, Kafka) in Luxoft

Projektbeschreibung: Das Team ist für den Aufbau der Servicegruppe verantwortlich, die Daten aus vorgelagerten Systemen in die Nordstrom Analytical Platform einspeist, umwandelt und speichert. Das System bietet Zugriff auf das bereits aggregierte Profil. Das Ziel des Projekts besteht darin, die Bereitstellung aller Daten zu beschleunigen, um aktuellere Daten und schnellere Maßnahmen zu ermöglichen. Außerdem muss ein Kandidat für einen regelmäßigen 12/7-Stunden-Bereitschaftssupport bereit sein. Verantwortlichkeiten: – Implementierung neuer Funktionen – MR-Überprüfung für andere Teammitglieder – Fehlerbehebung vorhandener Funktionen – Refaktorierung /Neugestaltung vorhandener Codebasis – Verbesserung der Testabdeckung – Erstellung und Versand von Produktartefakten an Entwicklungs-/Produktcluster – Infrastrukturaktualisierungen. Beschreibung der obligatorischen Fähigkeiten: – 4 Jahre+ Erfahrung mit Python – Erfahrung mit AWS (S3, SQS, IAM, Secret Manager, KMS) – Apache Airflow – Apache Kafka – Apache Spark – Fachkenntnisse mit SQL oder DWH – Erfahrung mit Versionskontrolle, Build, CI/CD-Tool (vorzugsweise GitLab-CI) – Verständnis der Kernkonzepte von Big Data (Common, Spark usw.) – Erfahrung mit JIRA, Confluence – Fähigkeit, damit zu arbeiten Java – Vertrautheit mit der agilen Entwicklungsmethodik (Scrum) – Klare Kommunikationsfähigkeiten (kommuniziert über alle Regionen hinweg) – Praktische Erfahrung mit Unterstützung auf Abruf. Nützliche Fähigkeiten: – Erfahrung mit Teradata – Praktische Nutzung von Kubernetes – Google Cloud Platform – Erfahrung mit BigData-Stacks, insbesondere mit Flink, Hive, Trino für SQL – Vault – IaC (vorzugsweise). Terraform)Sprachen:Englisch: B2Upper Intermediate