Leitender Python-Dateningenieur (SK-1256) in Nortal

Senior Python Data Engineer (SK-1256) Київ, Львів, віддалено Nortal heißt einen erfahrenen Senior Python (Data) Engineer willkommen, dem Projektteam unseres Kunden beizutreten – dem internationalen Giganten der Bergbauindustrie! Das Unternehmen überdenkt und digitalisiert den Bergbauprozess neu und nutzt dabei die neuesten und innovativsten IT-Technologien, um über eine integrierte Wertschöpfungskette hinweg nachhaltigen Wert zu schaffen. Über unseren Kunden Unser Kunde ist ein globales Bergbauunternehmen mit einem erstklassigen Produktportfolio, das täglich von einer Milliarde Verbrauchern verwendet wird. Unser Kunde verlässt sich auf Daten und modernste Datenwissenschaft, um seine Abläufe zu verbessern. Sie nutzen außerdem fortschrittliches maschinelles Lernen und künstliche Intelligenz, um ihre Prozesse zu optimieren. Über das Projekt Unser Kunde ist ein riesiges Unternehmen mit 90.000 Mitarbeitern weltweit. Sie verfügen über eine eigene innovative IT-Abteilung, die den gesamten Entwicklungszyklus der von der Organisation verwendeten Produkte abwickelt. Sie arbeiten in einem internationalen Expertenteam an der Entwicklung anspruchsvoller Softwarelösungen, die einen direkten Einfluss auf nahezu jeden Aspekt des modernen Lebens haben. Sie nutzen innovative Praktiken und neueste Technologien, um ihren Kunden auf der ganzen Welt sichere und nachhaltige Produkte zu liefern. Datenanalyse ist eine neue Disziplin in der Technik- und Nachhaltigkeitsfunktion unseres Kunden. Das Unternehmen wird mehr Daten als je zuvor generieren und muss die Systeme aufbauen, um dies zu unterstützen und bessere Entscheidungen zu treffen. Mission Arbeiten Sie eng mit dem Data Engineering Lead zusammen, um effektive Datenerfassungsstrategien zu entwickeln, die an den Geschäftszielen ausgerichtet sind. Definieren und implementieren Sie robuste Datenerfassungsmuster und -prozesse, um einen effizienten und zuverlässigen Datenfluss in die Datenplattform des Unternehmens sicherzustellen. Entwickeln und pflegen Sie wiederverwendbare Data Engineering- oder ETL-Pipelines und Codebasis mit Python. PySpark, Databricks, Airflow, REST-APIs und die Azure-Cloud-Plattform. Entwerfen und implementieren Sie robuste Daten-APIs mithilfe von Python-Frameworks wie FastAPI oder Flask und stellen Sie sie auf Azure App Service bereit. Arbeiten Sie mit funktionsübergreifenden Teams zusammen, um Datenanforderungen zu verstehen und skalierbare Data-Engineering-Lösungen bereitzustellen. Entwerfen und implementieren Sie Batch- und Streaming-Datenarchitekturen unter Nutzung von Azure-Clouddiensten wie Azure Data Factory und Azure Databricks. Tragen Sie zur Entwicklung und Bereitstellung von Apache Airflow auf Azure Kubernetes Service (AKS) bei. Stellen Sie die Einhaltung bewährter Software-Engineering-Praktiken sicher, einschließlich Versionskontrolle, Tests und kontinuierlicher Integration/kontinuierlicher Bereitstellung (CI). /CD)-Prozesse. Nehmen Sie an Incode-Reviews, technischen Diskussionen und Wissensaustauschsitzungen im Team teil. Anforderungen: Gute Erfahrung in der Programmiersprache Python. Nachgewiesene Erfahrung mit Apache Airflow und seinen Bereitstellungen im Azure Kubernetes Service. Praktische Erfahrung mit Python-Frameworks wie FastAPI oder Flask und der Bereitstellung von REST APIs im Azure App Service. Ausgeprägtes Verständnis der zentralen Data-Engineering-Konzepte und -Prinzipien. Solide Erfahrung mit Azure-Cloud-Diensten, einschließlich Azure Data Factory und Azure Databricks. Kenntnisse im Schreiben von PySpark-Code für die Datenverarbeitung und -transformation. Fähigkeit, wiederverwendbare und skalierbare Data-Engineering-Pipelines und Codebasis zu entwerfen und zu implementierenVerständnis für Software-Engineering-Entwicklungspraktiken, einschließlich Versionskontrolle, Tests und kontinuierlicher Integration/kontinuierlicher Bereitstellung (CI/CD). Erfahrung im Entwerfen von Batch- und Streaming-Datenarchitekturen mithilfe von Azure-Cloud-Plattformdiensten. Effektive Fähigkeiten zur Problemlösung und die Fähigkeit, komplexe Data-Engineering-Probleme zu beheben. Engagement für Kontinuität Lernen und Bleiben Sie über Branchentrends und Best Practices in der Datentechnik auf dem Laufenden. Starke Kommunikations- und Kollaborationsfähigkeiten mit Englischkenntnissen. Fähigkeit, effektiv in einer Teamumgebung zu arbeiten, Schulungen bereitzustellen und Prozesse zu dokumentieren. Nice tohave: Vertrautheit mit Python-Tools wie Pytest, Tox, Poetry. Vertrautheit mit Python-Tests Frameworks wie Pytest und Build-Tools wie Tox und Poetry. Erfahrung im Aufbau von CI/CD-Pipelines und in der Arbeit mit Git-basierten Versionskontrollsystemen. Kenntnisse in Containerisierungstechnologien wie Docker und Kubernetes. Nortal bietet ein familiäres Umfeld und persönliche Aufmerksamkeit für jeden Spezialisten. Direkte Zusammenarbeit mit Kunden aus Europa und den USA und ihre innovativen Produkte. Wettbewerbsfähiges Gehalt und regelmäßige Bewertungen. Die Work-Life-Balance, die Sie verdienen: 24 Arbeitstage bezahlter Urlaub. Bildungserstattung, finanzierte Sprachkurse, Zertifizierungen. „Benefit Café mit verschiedenen Kategorien wie Sport, Freizeit, Bücher, Kraftstoff usw. Gesundheitsfürsorge: 10 bezahlt Krankenstände, bedarfsgerechte Krankenversicherung, Impfungen Gemütlicher Arbeitsplatz und WFH-Möglichkeiten Spannende Veranstaltungen und schöne Geschenke für Ihre Familie On-Demand-Umzugsunterstützung nach Polen Bitte gestatten Sie unserem Unternehmen in Ihrem Lebenslauf, Ihre persönlichen Daten zu verwenden.