Leitender Dateningenieur in Lyft

30. September 2024

Senior Data Engineer

Київ, віддалено

Bei Lyft ist es unsere Mission, das Leben der Menschen mit den besten Transportmitteln der Welt zu verbessern. Um dies zu erreichen, beginnen wir mit unserer eigenen Community, indem wir eine offene, integrative und vielfältige Organisation schaffen.

Hier bei Lyft sind Daten die einzige Möglichkeit, Entscheidungen zu treffen. Es ist der Kern unseres Geschäfts. Es hilft uns, ein Transporterlebnis für unsere Kunden zu schaffen und bietet Einblicke in die Wirksamkeit unserer Produkteinführung und -funktionen.

Als Data Engineer bei Lyft sind Sie Teil eines Frühphasenteams, das den Datentransport, die Sammlung und die Speicherung aufbaut und Dienste bereitstellt, die Daten zu einem erstklassigen Bürger bei Lyft machen. Wir suchen einen Data Engineer für den Aufbau einer skalierbaren Datenplattform. Sie schlagen proaktiv neue Ideen vor, bewerten mehrere Ansätze und wählen den besten auf der Grundlage grundlegender Qualitäten und unterstützender Daten aus. Kommunizieren Sie hochtechnische Probleme und arbeiten Sie mit unserem funktionsübergreifenden Team zusammen. Sie sind Eigentümer unserer Kerndatenpipeline, die die Top-Metriken von Lyft unterstützt. Sie werden außerdem Datenexpertise nutzen, um bei der Entwicklung von Datenmodellen in mehreren Komponenten des Datenstapels zu helfen. Sie helfen bei der Planung, dem Aufbau und der Einführung skalierbarer Datenpipelines, um die wachsenden Datenverarbeitungs- und Analyseanforderungen von Lyft zu unterstützen. Ihre Bemühungen ermöglichen den Zugriff auf Einblicke in das Geschäfts- und Nutzerverhalten und nutzen riesige Mengen an Lyft-Daten, um verschiedene Teams wie Analytics, Data Science, Engineering und viele andere zu unterstützen.

Verantwortlichkeiten:

• Verantwortlich für die Kerndatenpipeline des Unternehmens, verantwortlich für die Skalierung des Datenverarbeitungsflusses, um dem schnellen Datenwachstum bei Lyft gerecht zu werden
• Entwickeln Sie das Datenmodell und das Datenschema basierend auf den geschäftlichen und technischen Anforderungen.
• Implementieren und übernehmen Sie Systeme zur Überwachung der Datenqualität und -konsistenz.
• Schlagen Sie Tools vor und entwickeln Sie sie, die das Self-Service-Data-Pipeline-Management (ETL) unterstützen.< /li>
• SQL- und MapReduce-Auftragsoptimierung zur Verbesserung der Datenverarbeitungsleistung
• Fahren Sie die technische Roadmap des DE-Teams voran und stimmen Sie sie auf das Team und die Stakeholder ab.
• Erstellen Sie gut ausgearbeitet, gut -Getesteter, lesbarer und wartbarer Code unter Berücksichtigung der Kosten und Skalierbarkeit der Dateninfrastruktur.
• Nehmen Sie an Codeüberprüfungen teil, um die Codequalität sicherzustellen und Wissen zu verbreiten.
• Nehmen Sie an Bereitschaftsrotationen teil, um eine hohe Verfügbarkeit sicherzustellen und Zuverlässigkeit von Arbeitsabläufen und Daten
• Entsperren, unterstützen und kommunizieren mit internen und externen Partnern, um Ergebnisse zu erzielen

Erfahrung:

• 5 + Jahre relevante Berufserfahrung
• Umfangreiche Erfahrung mit Spark
• Erfahrung mit Hadoop (oder ähnlichem) Ökosystem, S3, DynamoDB, MapReduce, Yarn, HDFS, Hive, Spark, Presto, Pig , HBase, Parquet
• Gute Kenntnisse in einer Skriptsprache (Python, Bash usw.)
• Erfahrung in der Erstellung komplexer Datenmodelle und Pipelines
• Beherrscht Mindestens eine der SQL-Sprachen (MySQL, PostgreSQL usw.)
• 4+ Jahre Erfahrung mit Workflow-Management-Tools (Airflow oder ähnliches)
• Erfahrung in der direkten Arbeit mit funktionsübergreifenden Daten Analytik, Datenwissenschaftlerund Engineering-Teams, um die Geschäftsziele von Lyft mit Data Engineering zu verbinden.
• Bevorzugte Erfahrung in der Erstellung und Pflege von Datentabellen im Zusammenhang mit der Kundenbetreuung als Data Engineer für große Unternehmen.

Vorteile:

• Die neueste Technologie und Ausrüstung, die Sie benötigen
• 28 Kalendertage Urlaub und bis zu 5 bezahlte freie Tage
• 18 Wochen bezahlter Elternurlaub. Berechtigt sind alle leibliche Eltern, Adoptiv- und Pflegeeltern.
• Leistungen für die psychische Gesundheit
• Leistungen zur Familiengründung

Diese Rolle ist in der Ukraine völlig abgelegen und wird für diese Stelle beworben Diese Rolle muss in der Ukraine angesiedelt sein.