Dateningenieur in ITRex Group

Dateningenieur Kiew, Warschau (Polen), veröffentlicht Über ITRex Wir sind ein globales IT-Beratungs- und Entwicklungsunternehmen mit einer WeCare-Einstellung, das bestrebt ist, die digitale Transformation unserer Kunden voranzutreiben. Unser über 230-köpfiges Team vereint kreative und talentierte funktionsübergreifende Experten, die auf den Erfolg jedes Projekts bedacht sind. Wir haben Hunderte bahnbrechende Lösungen an Fortune-500-Giganten, mittelständische Unternehmen und Startups geliefert und sind stolz darauf, Teil einer Erfolgsgeschichte von Weltmarktführern wie TASC, Procter & Gamble, Dun & Bradstreet, Turvo, Universal Electronics, Shutterstock, Dollar Shave Club oder JibJab zu sein. Wir legen Wert auf Initiative, offene Kommunikation und eigenmotiviertes Engagement statt auf Compliance und das Ankreuzen von Kästchen und sind auf der Suche nach Gleichgesinnten, die unsere Leidenschaft teilen, gemeinsam großartige neue Dinge zu tun. Treten Sie unserem freundlichen Team asaData Engineer bei! Unsere Erwartungen Erforderlich: 4+ Jahre Erfahrung im Aufbau von Pipelines für die Verarbeitung großer Datenmengen. Kenntnisse in Python (OOP, Arbeiten mit API, Datenverarbeitung) und SQL. Erfahrung mit Spark und Spark Structured Streaming (Databricks). Erfahrung mit AWS und Cloud-basiertem Computing (EC2, S3, Athena, Redshift) Erfahrung mit CI-CD-Automatisierung (GitHub Actions, Jenkins oder ähnliches) Verständnis von Big-Data-Formaten: Parkett, Avro, Delta Verständnis der Datalake-Architektur Erfahrung mit Kafka oder RabbitMQ Erfahrung in der Arbeit mit funktionsübergreifenden Teams und Geschäftskunden Ein starkes Verantwortungsbewusstsein und Proaktive Herangehensweise an die Bewältigung und Lösung von Problemen. Ausgezeichnete mündliche und schriftliche Englischkenntnisse, um in einer internationalen Teamumgebung zu arbeiten. Nice tohave. Grundlegende Java-Entwicklerkenntnisse. Erfahrung mit Airflow (oder einem ähnlichen Orchestrierungstool). Ihre Verantwortlichkeiten. Entwickeln und pflegen Sie skalierbare Datenpipelines. Erfassen Sie Anforderungen, Umfang, Architektur, Entwicklung, Erstellung und Veröffentlichung , und verwalten Sie datenorientierte Projekte für verschiedene Teile der Organisation unter Beibehaltung von Leistung, Stabilität und fehlerfreiem Betrieb. Identifizieren und lösen Sie Pipeline-Probleme und identifizieren Sie Möglichkeiten für Verbesserungen. Entwickeln Sie skalierbare und zuverlässige Datenlösungen, um Daten aus mehreren Produkten nahezu in Echtzeit systemübergreifend zu verschieben Helfen Sie bei der Evaluierung neuer Tools und Technologien, um den Technologie-Stack auf dem neuesten Stand zu halten. Helfen Sie bei der Fehlerbehebung bei kritischen Problemen in komplexen Designs oder Codierungsschemata. Überwachen Sie vorhandene Metriken, analysieren Sie Daten und arbeiten Sie mit anderen internen Teams zusammen, um schwierige Probleme zu lösen und so ein besseres Kundenerlebnis zu schaffen. Erstellen und pflegen Sie Architektur- und Systemdokumentation. Was wir bieten Ein Gefühl von Gemeinschaft und Freundschaft, Diversität und Inklusivität. Informelles Arbeitsumfeld mit kurzen Entscheidungswegen. Flexible Arbeitszeiten und Remote-Arbeitsoptionen. Etablierte Prozesse zur persönlichen Entwicklung. Unterstützung von professioneller Schulung und Zertifizierung. Regelmäßige Unternehmensveranstaltungen (ITRexTalks, Q&A-Sitzungen mit dem CEO, Tech Meet-Ups). ) Sozialleistungen (Krankenversicherung, Sporterstattung und kostenloser Englischunterricht)