Leitender Dateningenieur in Dataforest

Auf der Suche nach einem Senior Data Engineer zur Verstärkung des Dataforest-Teams. Wenn Sie auf der Suche nach einem freundlichen Team, einem gesunden Arbeitsumfeld und einem flexiblen Zeitplan sind, sind Sie bei uns an der richtigen Stelle, um Ihren Lebenslauf zu senden. Anforderungen an die Fähigkeiten: • 4+ Jahre Erfahrung mit Python; • 3+ Jahre Erfahrung als Dateningenieur;• Kenntnisse über Datenalgorithmen und Datenstrukturen sind ein MUSS;• Hervorragende Erfahrung mit Pandas;• Hervorragende Erfahrung mit SQL DB / NoSQL (Redis, Mongo, Elasticsearch) / BigQuery;• Erfahrung mit Apache Kafka, Apache Spark (pyspark); • Erfahrung mit Hadoop; • Vertrautheit mit Amazon Web Services; • Verständnis der Grundlagen des Cluster-Computing; • Arbeiten mit Tabellen mit hohem Volumen ab 100 m. Optionale Fähigkeiten (als Plus): • Erfahrung mit Planung und Überwachung (Databricks, Prometheus, Grafana); • Erfahrung mit Airflow; • Erfahrung mit Snowflake, Terraform; • Erfahrung in Statistik; • Kenntnisse über DS und Algorithmen für maschinelles Lernen. Hauptaufgaben: • Erstellen von ETL-Pipelines und Datenverwaltungslösungen (API, Integrationslogik); • Ausarbeiten verschiedener Datenverarbeitungsalgorithmen; • Beteiligung an der Erstellung von Prognosen, Empfehlungen und Klassifizierungen • Entwickeln und implementieren Sie Arbeitsabläufe für den Empfang und die Umwandlung neuer Datenquellen, die im Unternehmen verwendet werden sollen. • Entwickeln Sie die bestehende Data Engineering-Infrastruktur, um sie skalierbar zu machen und sie auf erwartete zukünftige Volumina vorzubereiten. • Identifizieren, entwerfen und implementieren Sie Prozessverbesserungen (d. h. Automatisierung manueller Prozesse, Neugestaltung der Infrastruktur usw.).Wir bieten: • Tolle Networking-Möglichkeiten mit internationalen Kunden, herausfordernde Aufgaben; • Aufbau interessanter Projekte von Grund auf mit neuen Technologien; • Persönliche und berufliche Entwicklungsmöglichkeiten; • Wettbewerbsfähiges Gehalt in USD; • Bezahlter Urlaub und Krankheitsurlaub, Krankenversicherung; • Flexible Arbeitszeiten; • Freundliches Arbeitsumfeld mit minimaler Hierarchie; • Teambuilding-Aktivitäten, Firmenveranstaltungen.