Senior Data Engineer (Azure) @ GetInData | Teil von Xebia in GetInData | Part of Xebia

Die Rolle eines Dateningenieurs umfasst den Entwurf, den Aufbau und die Pflege von Datenarchitekturen, Tools und Verfahren, die die Erfassung, Speicherung, Bearbeitung und Analyse erheblicher Datenmengen in einem Unternehmen erleichtern. In dieser Position geht es darum, Datenplattformen auf der allgemein bereitgestellten Infrastruktur aufzubauen und einen optimierten Weg für Analytics Engineers zu etablieren, die auf das System angewiesen sind. Kenntnisse in einer Programmiersprache wie Python/Scala oder Java. Kenntnisse über Lakehouse-Plattformen – Databricks. Erfahrung im Umgang mit Messaging-Systemen – Kafka. Vertrautheit mit Versionskontrollsystemen, insbesondere GIT. Erfahrung als Programmierer und Kenntnisse in Softwareentwicklung, guten Prinzipien, Praktiken und Lösungen. Umfangreich Erfahrung in Microsoft Azure. Kenntnisse in mindestens einem Orchestrierungs- und Planungstool, zum Beispiel Airflow, Azure Data Factory, Prefect, Dagster. Vertrautheit mit DevOps-Praktiken und -Tools, einschließlich Docker, Terraform, CI/CD, Azure DevOps. Fähigkeit zur aktiven Teilnahme/Führung Gespräche mit Kunden, um konkrete und ehrgeizige Verbesserungsmöglichkeiten zu identifizieren und zu bewerten. Die Rolle eines Dateningenieurs umfasst den Entwurf, den Aufbau und die Wartung von Datenarchitektur, Tools und Verfahren, die die Erfassung, Speicherung, Bearbeitung und Analyse erheblicher Datenmengen durch ein Unternehmen erleichtern. In dieser Position geht es darum, Datenplattformen auf der allgemein bereitgestellten Infrastruktur aufzubauen und einen optimierten Weg für Analytics Engineers zu etablieren, die auf das System angewiesen sind. ,[Zusammenarbeit mit Plattformingenieuren zur Bewertung und Auswahl der am besten geeigneten Technologien und Tools für das Projekt, Entwicklung und Festlegung neuer Funktionalitäten und Open-Source-Tools, Durchführung komplizierter Datenerfassungsverfahren, Implementierung und Verabschiedung von Richtlinien im Einklang mit den strategischen Plänen des Unternehmens in Bezug auf eingesetzte Technologien, Arbeitsorganisation usw., Sicherstellung der Einhaltung von Industriestandards und Vorschriften in Bezug auf Sicherheit, Datenschutz in der Datenverarbeitungsschicht, Durchführung von Schulungen und Wissensaustausch] Anforderungen: Python, Databricks, Kafka, Git, Airflow, Docker, Terraform, CI/CD, Microsoft Azure, Azure DevOps Tools: Jira, GitLab, GIT, Jenkins / GitLab, Agile. Zusätzlich: Sportabonnement, private Gesundheitsversorgung, flache Struktur, kleine Teams, internationale Projekte, Teamevents, Trainingsbudget, kostenloser Kaffee, Fitnessstudio, Fahrradabstellplatz, Spielzimmer, kostenlose Snacks, kostenlose Getränke, Inhouse-Schulungen, Startup-Atmosphäre, kein Dresscode , Küche.