Mittlerer/leitender Dateningenieur in Onseo

7. September 2024

Middle/Senior Data Engineer

Kiew, Winnyzja, remote

Wir suchen einen erfahrenen Data Engineer , Dies wird dazu beitragen, das Produkt unseres US-Partners zu verbessern. Dieses Produkt bietet Kunden seit mehreren Jahren erfolgreich die Möglichkeit, mithilfe einer spezialisierten Technologieplattform vielfältige Events, Sportaktivitäten und Freizeit zu planen.

Anforderungen:

• 3+ Jahre Erfahrung in Datentechnik und Gebäude < b> Datenspeicherung ;
• Erfahrung im Sammeln großer, komplexer Datensätze, die funktionale/nichtfunktionale Geschäftsanforderungen erfüllen;
• Erfahrung in der Unterstützung der optimalen Architektur der Datenpipeline;
• Ausgezeichnete Programmierkenntnisse in Python ;
• Umfangreiche Erfahrung mit SQL-Abfragen ;
• Erfahrung in der Gestaltung und Optimierung von Datenbanken;
• Praktische Erfahrung mit Big Data-Technologien (zum Beispiel Spark, Hadoop);
• Erfahrung mit PySpark zur Verarbeitung von Big Data;
• Erfahrung in der Analyse, Transformation und Speicherung von Daten in den angegebenen Formaten in Big-Data-Umgebungen;
• Die Grundlagen des verteilten Rechnens verstehen;
• Erfahrung mit AWS Datendiensten und Infrastrukturmanagement;
• Erfahrung mit AWS Lambda, Glue, RedShift, S3 ;
• Englisch auf einem Niveau von mindestens Upper Intermediate (Konversation ist obligatorisch).

Von Vorteil:

• Erfahrung mit PowerBI;
• Erfahrung mit Apache Airflow/MWAA , Erstellung von Workflow-DAGs und Planung von Jobs.

Hauptaufgaben:

• Implementierung und Wartung des Data Warehouse;
• Implementierung von ETL-Pipelines zur Befüllung des Warehouses mit Daten aus verschiedenen Warehouses/APIs mit Gewährleistung der Datenkonsistenz;
• Implementierung von Tools für standardisierte interne und externe Datenanfragen in unterschiedlichen Formaten und Standorten;
• Aufteilung komplexer Aufgaben in erreichbare Aufgaben;
• Überwachen Sie die Systemleistung und stellen Sie sicher, dass Datenkonsistenz und Latenz den Produktanforderungen entsprechen.

Wir bieten:

• Freundliches und hochprofessionelles Team, demokratische Führung;
• Berufliche Weiterentwicklung und Ausbildung;
• Karriereplanung und regelmäßige Leistungsbeurteilungen;
• Wettbewerbsfähiges Gehalt;
• Krankenversicherung und bezahlter Krankenurlaub;
• Langfristige Anstellung mit 24 Kalendertagen bezahltem Urlaub;
• Sportausgleich und Englischunterricht;
• Arbeiten Sie an interessanten Projekten mit fortschrittlichen Technologien.

DE

Wir suchen einen Middle/Senior Data Engineer Wer wird dem Entwicklungsteam beitreten, um zur Verbesserung des Produkts unseres amerikanischen Kunden beizutragen? Dieses Produkt bietet Kunden seit Jahren erfolgreich einen Service zur Planung verschiedener Events, Sport- und Freizeitaktivitäten auf einer spezialisierten Plattform.

Anforderungen:

• 3+ Jahre Erfahrung im Data Engineering und im Aufbau von Data Warehouses;
• Stellen Sie große, komplexe Datensätze zusammen, die funktionale/nichtfunktionale Geschäftsanforderungen erfüllen.
• Sorgen Sie für eine optimale Architektur der Datenpipeline ;
• Kenntnisse in der Python -Programmierung;
• Ausgeprägte SQL-Abfragekenntnisse ;
• Erfahrung mit Datenbankdesign und -optimierung;
• Praktische Erfahrung mit Big-Data-Technologien (z. B. Spark, Hadoop);
• Erfahrung mit PySpark für die Big-Data-Verarbeitung;
• Erfahrung im Parsen, Transformieren und Speichern von Daten in diesen Formaten in Big-Data-Umgebungen;
• Verständnis der Prinzipien des verteilten Rechnens;
• Erfahrung mit AWS Datendiensten und Infrastrukturmanagement;
• Kenntnisse in  AWS Lambda, Glue, RedShift, S3;
• Obere Mittelstufe Englischniveau.

Wäre ein Plus:

• Erfahrung mit PowerBI;
• Erfahrung mit Apache Airflow/MWAA , dem Erstellen von Workflow-DAGs und der Planung von Jobs.

Rollenverantwortung:

• Data Warehouse implementieren und unterstützen;
• Implementieren Sie ETL-Pipelines, um das Data Warehouse mit Daten aus verschiedenen Speichern/APIs zu füllen und dabei die Datenkonsistenz zu gewährleisten.
• Implementieren Sie Tools für die standardisierte interne und externe Abfrage der Daten in verschiedenen Formaten und an verschiedenen Orten.
• Komplexe Probleme in ausführbare Aufgaben zerlegen;
• Überwachen Sie die Leistung des Systems und stellen Sie sicher, dass die Datenkonsistenz und die Aktualisierungslatenz den Produktanforderungen entsprechen.

Wir bieten:

• Freundliches und hochprofessionelles Team;
• Demokratisches Management;
• Berufliche Weiterentwicklung und Ausbildung;
• Karriereplanung und regelmäßige Leistungsbeurteilungen;
• Wettbewerbsfähiges Gehalt;
• Medizinische Ausstellung und bezahlte Krankheitstage;
• Langfristige Beschäftigung mit 24 Kalendertagen bezahltem Urlaub;
• Sportausgleich und Englischunterricht;
• Arbeiten Sie an interessanten Projekten mit modernsten Technologien.

Sobald Sie sich entschieden haben, müssen Sie sich mit Ihren persönlichen Dienstleistungen zufrieden geben хист персональних даних» vom 01.06.2010 р. № 2297-VІ з metoю потенційної подальшої співпраци.