Leitender Dateningenieur in EPAM Systems, Inc.

Beschreibung des leitenden Dateningenieurs

Wir suchen einen erfahrenen Senior Data Engineer zur Verstärkung unseres Teams.

Das Projekt beinhaltet die Entwicklung und Optimierung einer neuen Datenplattform zur Anpassung unseres aktuellen Datenverarbeitungssystems. Der Senior Data Engineer ist für die Gestaltung, Implementierung und Wartung der Plattform verantwortlich, um den Datenanforderungen des Unternehmens gerecht zu werden.

Die Remote-Option gilt nur für Kandidaten, die von einem beliebigen Standort in der Ukraine aus arbeiten.

Verantwortlichkeiten

• Entwickeln Sie Datenverarbeitungspipelines mithilfe von Azure Data Factory und Azure Functions
• Implementieren Sie Datenerfassungs- und Transformationsprozesse mit Databricks und PySpark
• Schreiben Sie effizienten Code in Python und SQL, um Daten zu extrahieren, transformieren und zu laden
• Arbeiten Sie mit Stakeholdern zusammen, um Anforderungen zu sammeln und Stellen Sie sicher, dass die Plattform die Geschäftsanforderungen erfüllt.
• Überwachen und beheben Sie die Leistung der Plattform und beheben Sie etwaige Probleme.
• Implementieren Sie Maßnahmen zur Datenqualitätssicherung und Prozessverbesserungen.
• Optimieren Sie die Datenspeicherung und den Datenabruf Betrieb
• Führen Sie Datenanalysen durch und generieren Sie Erkenntnisse zur Entscheidungsfindung
• Trainieren und betreuen Sie junge Dateningenieure
• Nehmen Sie an Peer-Code-Reviews und kollaborativen Teamaktivitäten teil

Anforderungen

• 3+ Jahre praktische Erfahrung im Big-Data-Bereich und Fachwissen im Data Software Engineering
• Umfangreiches Wissen und Erfahrung mit Azure Data Factory, Azure Functions und Databricks
• Kenntnisse in PySpark, Python und SQL
• Verständnis der Stapelverarbeitung und ETL-Prinzipien in Data Warehouses
• Erfahrung mit Datenvollständigkeitssignalen und Orchestrierung
• Kenntnisse über Schemamigrationen und Datensatzentwicklung
• Vertrautheit mit Ansätzen zur historischen Neuverarbeitung und Datenkorrektur
• Gute Problemlösungs- und Kommunikationsfähigkeiten
• Gute Englischkenntnisse auf B2+-Niveau, gute Englischkenntnisse

Schön zu haben

• Vertrautheit mit Microsoft Power BI
• Kompetenz in Azure Blob Storage und Azure File Storage

Wir bieten

• Arbeiten Sie nach einem flexiblen Zeitplan aus der Ferne oder von einem unserer komfortablen Büros aus oder Coworking Spaces in der Ukraine
• Erhalten Sie die notwendige Ausrüstung, um Ihre Arbeitsaufgaben auszuführen
• Ändern Sie Projekte und Technologie-Stacks innerhalb von EPAM
• Sammeln Sie Erfahrungen in verschiedenen Geschäftsbereichen (Versicherungen, E-Commerce, Gesundheitswesen, Finanzen, Reisen, Medien, künstliche Intelligenz und mehr)
• Ziehen Sie Umzugsmöglichkeiten in über 30 Länder weltweit in Betracht
• Nehmen Sie an Freiwilligen-, Wohltätigkeitsprogrammen und Gemeinschaften teil (beide). technisch und interessenbezogen)
• Sie können gemeinsam mit Ihrem Vorgesetzten Ihren individuellen Karriereweg planen
• Erhalten Sie regelmäßig Feedback von Kollegen
• Verbessern Sie Ihr Englisch kostenlos mit zertifizierten Lehrer (Speaking Clubs, Vorbereitungskurse für Kundeninterviews usw.))
• Erhalten Sie die Möglichkeit, eine kostenlose Schulung und Zertifizierung in AWS, GCP oder Azure Clouds zu absolvieren
• Nutzen Sie das interne E-Learn-Schulungsprogramm (über 18.200 spezialisierte Schulungs- und Mentoringprogramme)< /li>
• Greifen Sie auf Unternehmenskonten auf LinkedIn Learning, Get Abstract und anderen Partnerressourcen zu.
• Studieren Sie an der EPAM Solution Architecture School mit Dozenten, die praktizierende Architekten sind.
• Entwickeln Sie sich als Führungskraft , nehmen Sie an der Delivery Management, Resource Management, Leadership Essentials School und mehr teil
• Nehmen Sie an internen Communities teil (500+ Meetups, technische Diskussionen, Brainstorming-Sitzungen, Online-Events und Konferenzen pro Jahr)
• Urlaub und Krankenurlaub (einschließlich Krankenurlaub ohne ärztliches Attest)
• Eine breite Palette freiwilliger Krankenversicherungsprogramme, die sowohl medizinische Behandlung als auch verschiedene Präventionsmöglichkeiten (einschließlich Sportaktivitäten) bieten.
• Krankenversicherung für Familienmitglieder zu Firmentarifen
• Unterstützung des Unternehmens bei wichtigen Lebensereignissen (Geburt oder Adoption, Heirat usw.)
• Unterstützung für psychologisches Wohlbefinden: Ermäßigungen auf Dienstleistungen von Spezialisten für psychische Gesundheit oder Coaches, thematische Schulung
• E-Kids-Programm – ein kostenloses Programmiersprachen-Trainingsprogramm für die Kinder von EPAMern

EPAM ist bestrebt, sein globales Team von über 52.800 Fachkräften in mehr als 55 Länder mit Möglichkeiten zur beruflichen Weiterentwicklung vom ersten Tag der Zusammenarbeit an. Unsere Kollegen sind die Quelle des Erfolgs von EPAM. Deshalb legen wir Wert auf Zusammenarbeit, sind bestrebt, das Geschäft unserer Kunden stets zu verstehen und streben nach höchsten Qualitätsstandards. Egal wo Sie sind, Sie werden einer engagierten, vielfältigen Community beitreten, die Ihnen hilft, Ihr Potenzial voll auszuschöpfen.