Leitender Dateningenieur in Abto Software

Senior Data Engineer Львів Wir suchen einen talentierten und engagierten Senior Data Engineer zur Verstärkung unseres Teams. Der ideale Kandidat wird maßgeblich an der Gestaltung unserer Datenarchitektur beteiligt sein, verschiedene Datenquellen integrieren und sicherstellen, dass unsere Datenpipelines skalierbar, robust und zeitnah sind. Mit einem ausgeprägten Verständnis moderner Daten-Stack-Technologien stehen Sie an der Spitze unserer Bemühungen, unsere Analyse-, maschinellen Lern- und Business-Intelligence-Initiativen voranzutreiben. Hauptaufgaben: Entwerfen, konstruieren, installieren und warten Sie umfangreiche Datenverarbeitungspipelines und andere Infrastrukturen. Legen Sie die Datenstrategie fest, indem Sie modernste Datenbanklösungen auswählen, entwerfen und integrieren. Erstellen, optimieren und warten Sie ETL/ELT-Prozesse mit modernen Tools und Plattformen. Stellen Sie die Datenintegration aus verschiedenen Quellen sicher und achten Sie dabei auf Datengenauigkeit, Zuverlässigkeit und Aktualität. Optimieren Sie den Datenbankbetrieb für maximale Leistung, einschließlich Überwachung, Fehlerbehebung und Verbesserung vorhandener Systeme. Arbeiten Sie mit Datenwissenschaftlern, ML-Ingenieuren und anderen Interessengruppen zusammen, um deren Dateninfrastrukturanforderungen zu unterstützen. Arbeiten Sie mit anderen Technologieteams zusammen, um Daten aus einer Vielzahl von Datenquellen zu extrahieren, umzuwandeln und zu laden. Implementieren Sie Sicherheitsmaßnahmen, um den Datenschutz und die Einhaltung relevanter Vorschriften und Best Practices sicherzustellen. Bleiben Sie über die neuesten Technologietrends auf dem Laufenden und bewerten und implementieren Sie bei Bedarf neue Systeme und Tools. Hard Skills: Bachelor-/Master-Abschluss in Informatik, Ingenieurwesen oder einem verwandten technischen Bereich. Mehr als 7 Jahre Erfahrung in einer Rolle im Bereich Datentechnik. Über 7 Jahre Erfahrung mit Cloud-Warehousing-Plattformen wie Redshift oder BigQuery. Mehr als 4 Jahre Erfahrung mit Datenorchestrierungsplattformen wie Airflow, Prefect oder Dagster. Mehr als 3 Jahre Erfahrung in der Architektur und dem Aufbau von Big-Data-Lösungen in der Cloud, insbesondere solchen, die Data-Lakehouse-Technologien nutzen, mit Schwerpunkt auf Leistungsoptimierung und Partitionierung. Mehr als 2 Jahre Erfahrung mit einem Transformations-Workflow-Framework wie DBT oder SQLMesh. Umfangreiche Kenntnisse und Erfahrung mit Data Lakes, Delta Lakes und Data Lake Houses. Gute Kenntnisse in SQL und Skriptsprachen (Python, Scala, Java usw.). Fundierte Kenntnisse der Data-Warehousing-Strategien, einschließlich Inmon, Kimball und Data Vault. Erfahrung mit Datenqualität, idealerweise mit einem Framework wie Great Expectations. Erfahrung im Gesundheits- oder Verhaltensgesundheitssektor. Nachgewiesene Erfolgsbilanz bei der Architektur und Bereitstellung einer hochskalierten Dateninfrastruktur. Unsere Vorteile: Förderung der beruflichen und beruflichen Weiterentwicklung; Wettbewerbsfähiges Gehalt; Bezahlter Urlaub und Krankheitsurlaub; Internes medizinisches Programm; Programm für Veteranen (einschließlich Mentoring, einem barrierefreien Büro für Menschen mit Behinderungen, rechtlicher Unterstützung und zusätzlichen Leistungen); Gleitende Arbeitszeit; Regelmäßige soziale Aktivitäten des Unternehmens; Regelmäßige technische Schulung im Reisebüro; Englischkurse; Fitnessstudio usw.