Leitender Datensoftware-Ingenieur in EPAM Systems

Unser Kunde, ein weltbekanntes multinationales Technologieunternehmen mit Sitz in Kalifornien und eines der Big 5 Technologieunternehmen, erweitert seine Partnerschaft mit EPAM. Kundenspezialisierung: Online-Dienste für Unterhaltungselektroniksoftware. Sie arbeiten mit erstklassigen Experten und Technologien, die von Herzen kommen aus dem Silicon Valley, das Produkte und Dienstleistungen entwickelt, die täglich von Milliarden von Menschen genutzt werden. Wir suchen einen erfahrenen Lead Software Data Engineer für unser Team. Fähigkeiten: 5+ Jahre praktische Erfahrung mit Big Data: Hadoop (HDFS, YARN oder Mesos). ), SparkWissen und praktische Erfahrung mit SQL im Big-Data-Kontext: Spark SQL, Hive QLKWissen über SparkOptimierung von Spark-Ausführungsplänen mit Spark UIGute Kenntnisse von Scala, einschließlich Scala-Funktionsbibliotheken (Cats)Kenntnisse über die Grundlagen der Stapelverarbeitung und ETL Prinzipien in Data WarehousesErfahrung mit Datenorchestrierung und Kenntnis der DatenvollständigkeitsbedingungenErfahrung mit Datenbereinigung (Umgang mit beschädigten, falschen und duplizierten Daten)Kenntnisse in der Migration von Schemata und der Entwicklung von DatensätzenKenntnisse in gesprochenem und geschriebenem Englisch mindestens auf Niveau B2Fähigkeit, schnell zu lernen und zu lernen a neue Reihe von Tools und Technologien, die im Projekt verwendet werden: Serviceplattformen, Telemetrieanbieter, Spark-as-a-Service, Systemsammlung und vieles mehr. Verantwortlichkeiten: Entwicklung von Datenpipelines, Aufgaben zur Erstellung neuer Ausgabedatensätze im Rahmen der Entwicklung neuer Funktionen Anpassung vorhandener Datenpipelines für die Integration mit verschiedenen Plattformen, Tools und Diensten. Bearbeitung von Fehlern im Code und in den Daten, die aufgrund falscher Logik oder Implementierung entstanden sind. Schnelle Datenanalyse und -recherche zur Unterstützung des Produktmanagementteams. Überwachung und Beseitigung von Produktionsproblemen mit vorhandenen Daten Pipelines Entwicklung und Implementierung von Qualitätsdatenprüfungen (Qualitätskontrolle) Planung des Umfangs neuer Entwicklungen: Schätzung der erforderlichen Ressourcen, Planung der Zeitrahmen für Aufgaben. Verwaltung in allen Aspekten: Codequalität, Komplexität, Wartung, Dokumentation. Kommunikation mit anderen Dateningenieuren Das Team, die Kollegen und Projektmanager in Bezug auf Status, Probleme, Schätzungen, Zeitrahmen usw. sind von Vorteil. Verständnis für funktionale Programmierideen und -prinzipien. Erfahrung im Schreiben und Verwenden von Webdiensten. Erfahrung in der Arbeit mit Teradata, Vertica, Oracle oder Tableau. Erfahrung mit Spark Streaming KafkaErfahrung oder Kenntnisse der folgenden Technologien: Apache Iceberg, Trino (Presto), Druid, Cassandra, Blob Storage, wie AWSErfahrung mit SplunkWissen oder Erfahrung mit Azkaban oder AirflowWir sind Sie, Sie können nach einem flexiblen Zeitplan aus der Ferne oder in einem unserer Dienste arbeiten Komfortable Büros oder Co-Working-Räume in der Ukraine. Erhalten Sie die notwendige Ausrüstung, um Arbeitsaufgaben auszuführen. Ändern Sie Projekte und den Technologie-Stack innerhalb von EPAM. Sammeln Sie Erfahrungen in verschiedenen Geschäftsbereichen (Versicherungen, E-Commerce, Gesundheitswesen, Finanzen, Reisen, Medien, künstliche Intelligenz und andere). ) Erwägen Sie Möglichkeiten für einen Umzug in mehr als 30 Länder der Welt. Treten Sie Freiwilligen-, Wohltätigkeitsprogrammen und Gemeinschaften bei (gemäßWir unterstützen Sie bei Ihrer beruflichen Weiterentwicklung. Planen Sie gemeinsam mit der Führungskraft Ihren individuellen Karriereweg. Holen Sie sich regelmäßig Feedback von Kollegen. Verbessern Sie Ihr Englisch kostenlos mit zertifizierten Lehrern (Speaking Clubs, Kurse zur Vorbereitung auf Kundengespräche, usw.) Erhalten Sie die Möglichkeit, eine kostenlose Schulung und Zertifizierung bei AWS, GCP oder Azure Clouds zu absolvieren. Nutzen Sie das interne Schulungsprogramm E-Learn (über 18.200 spezialisierte Schulungs- und Mentoringprogramme). Erhalten Sie Zugriff auf Unternehmenskonten auf LinkedIn Learning, Get Abstract und anderen Partnern Ressourcen Lernen Sie an der Solution Architecture School mit praktizierenden Architekten als Lehrer. Entwickeln Sie sich als Führungskraft, nehmen Sie an der Delivery Management, Resource Management, Leadership Essentials School und anderen teil. Werden Sie in internen Communities unterrichtet (über 500 Meetings, technische Diskussionen, Brainstorming-Sitzungen, Online-Veranstaltungen und Konferenzen). Jahr) Was wir bieten Urlaub und Krankheitstage (auch ohne ärztliches Attest) Eine breite Palette von Versicherungsprogrammen der Freiwilligen Krankenversicherung (VMI) mit der Bereitstellung sowohl medizinischer Behandlung als auch verschiedener Präventionsmöglichkeiten (einschließlich sportlicher Aktivitäten) Ausstellung einer Krankenversicherung für Familienmitglieder zu Firmentarifen Unterstützung durch das Unternehmen bei wichtigen Lebensereignissen (Geburt oder Adoption eines Kindes, Heirat usw.) Psychologische Komfortunterstützung: Ermäßigungen auf die Dienste von Spezialisten für psychische Gesundheit oder Coaches, thematische Schulungen E-Kids – a kostenloses Schulungsprogramm für Kinder von EPAM-Mitarbeitern in Programmiersprachen. Angenehme Werbegeschenke. Über EPAMERAM ist bestrebt, seinem globalen Team mit mehr als 60.000 Fachleuten in mehr als 45 Ländern vom ersten Tag der Zusammenarbeit an Möglichkeiten zur beruflichen Weiterentwicklung zu bieten. Unsere Kollegen sind die Quelle des Erfolgs von ERAM. Deshalb legen wir Wert auf Zusammenarbeit, versuchen stets, das Geschäft unserer Kunden zu verstehen und streben nach höchsten Qualitätsstandards. Egal wo Sie sind, Sie werden Teil einer engagierten, vielfältigen Community, die Ihnen dabei hilft, Ihr volles Potenzial auszuschöpfen Zeig mehr Zeige weniger Positionsebene Oberstufe der Sekundarstufe Art der Anstellung Vollzeit Berufliche Verantwortlichkeiten Ingenieurwesen und Informationstechnologien Branchen IT-Dienstleistungen und IT-Beratung