Senior Big Data Engineer (Anforderungen der Web- und Mobileinheit) in Sigma Software

Suchen Sie ein Team von Fachleuten auf dem neuesten Stand der Technik? Suchen Sie nach einem Ort, an dem Sie Ihre Big-Data-Karriere vorantreiben können? Wir laden Sie ein, unserem Big Data Competence Center beizutreten, das Teil der komplexen Organisationsstruktur von Sigma Software ist, die verschiedene Kunden, interessante Projekte und Aktivitäten vereint, um Ihre beruflichen Fähigkeiten zu erweitern. KUNDE Wir sind in verschiedenen Geschäftsbereichen tätig und arbeiten mit den Top-Kunden zusammen (Kunden ohne NDAs finden Sie hier: sigma.software/case-studies). Unser Team unterstützt in hohem Maße die Freiheit und Unabhängigkeit der Mitarbeiter bei der Entscheidungsfindung sowie den Wunsch, die Wünsche des Kunden tiefgreifend zu verstehen und die Wurzel des Problems zu erkennen. Wir glauben, dass Menschen, die diese Denkweise anstreben, als anerkannte Fachleute und treibende Kraft der Big-Data-Entwicklung in der Ukraine erfolgreich sein werden. Im PROJECT Big Data Competence Center sammeln wir die besten technischen Praktiken und vereinen sie in einer Wissensdatenbank, um unseren Kunden die besten technischen Exzellenzdienste zu bieten. Wir sind nicht nur ein Team, das sich versammelt hat, um Code zu schreiben. Wir alle sind bereit, einen Beitrag auf diesem Gebiet zu leisten, indem wir am Leben der Big Data Unit teilnehmen oder unsere Fähigkeiten ständig erweitern. In unserer Einheit können Sie ein Big-Data-Ingenieur/Teamleiter/Architekt sein, oder Sie können ein Mentor oder eine Person hinter allen neuen Technologien im Team werden, oder ein aktiver Zuhörer, wenn Sie so wollen. Wie auch immer Sie sich entscheiden, stellen Sie sicher, dass Sie nicht allein sind. Egal, ob es sich um eine schwierige Aufgabe, eine außergewöhnliche Kundenanfrage oder Ihr nächstes Projekt handelt, Sie haben immer einen Mentor und Teamkollegen mit der gleichen Einstellung, um die beste Lösung zu finden. Wir verfolgen einen ungewöhnlichen Ansatz und stellen Menschen nicht für ein bestimmtes Projekt ein, sondern vor allem für die Verstärkung unseres Teams. Dies gibt uns die Möglichkeit, Sie besser kennenzulernen und sicherzustellen, dass wir eine perfekte Übereinstimmung zwischen den Bedürfnissen des Kunden und Ihren beruflichen Interessen bieten. Wenn Sie den Mut haben, Teil der erstklassigen Big-Data-Community in der Ukraine zu werden, ergreifen Sie Ihre Chance und lassen Sie uns gemeinsam Geschichte schreiben! Stellenbeschreibung: Mitarbeit bei der Erforschung neuer Technologien und beim Entwurf komplexer Lösungen, Unterstützung einer Innovationskultur unter Berücksichtigung von Fragen der Sicherheit, Skalierbarkeit und Zuverlässigkeit mit Schwerpunkt auf dem Ausbau unserer ETL-Prozesse. Arbeit mit einem modernen Datenstapel, Erstellung gut konzipierter und robuster technischer Lösungen Code und Implementierung von Data-Governance-Prozessen. Zusammenarbeit und professionelle Kommunikation mit dem Team des Kunden. Übernahme der Verantwortung für die Bereitstellung wichtiger Lösungsfunktionen. Teilnahme am Anforderungserfassungs- und Klärungsprozess, Vorschlag optimaler Architekturstrategien, Leitung der Datenarchitekturimplementierung. Entwicklung von Kernmodulen und Funktionen, Entwurf skalierbarer und Kostengünstige Lösungen Durchführen von Codeüberprüfungen, Schreiben von Unit- und Integrationstests Skalieren des verteilten Systems und der Infrastruktur auf die nächste Ebene Aufbau einer Datenplattform unter Nutzung der Leistungsfähigkeit moderner Cloud-Anbieter (AWS/GCP/Azure) Zusätzliche Verantwortlichkeiten Diese Verantwortlichkeiten werden Ihnen helfen, sich beruflich weiterzuentwickeln und kann je nach Projekt und dem Wunsch, Ihre Rolle im Unternehmen zu erweitern, variieren. Being in the AWS-Cloud-Team und aktiver Beitrag zur Partnerschaft. Entwicklung der Micro Batch/Echtzeit-Streaming-Pipelines (Lambda-Architektur). Arbeit an POCs zur Validierung vorgeschlagener Lösungen und Migrationen. Leitung der Migration auf moderne Technologieplattformen, Bereitstellung technischer Anleitung. Einhaltung von CI/CD-Methoden. Unterstützung bei der Implementierung von Best Practices im Team. Beitrag zum Einheitenwachstum, Betreuung anderer Teammitglieder (optional). Besitz der gesamten Pipeline und Optimierung der Engineering-Prozesse. Entwerfen komplexer ETL-Prozesse für Analysen und Datenmanagement, Vorantreiben der massiven Implementierung. Qualifikationen: 5+ Jahre Erfahrung mit Python und SQL. Erfahrung mit AWS, insbesondere API Gateway, Kinesis, Athena, RDS und Aurora. Erfahrung im Aufbau von ETL-Pipelines für Analysen und interne Abläufe. Erfahrung im Aufbau interner APIs und Integration mit externen APIs. Arbeit mit dem Linux-Betriebssystem. Effektive Kommunikationsfähigkeiten, insbesondere für Erklären technischer Konzepte für technisch nicht versierte Unternehmensleiter. Wunsch, in einem dynamischen, forschungsorientierten Team zu arbeiten. Erfahrung mit verteilten Anwendungskonzepten und DevOps-Tools. Ausgezeichnete Schreib- und Kommunikationsfähigkeiten. Fehlerbehebungs- und Debugging-Fähigkeiten. 2+ Jahre Erfahrung mit Hadoop, Spark und Airflow Erfahrung mit DAGs und Orchestrierungstools Praktische Erfahrung mit der Entwicklung von Snowflake-gesteuerten Data Warehouses Erfahrung mit der Entwicklung ereignisgesteuerter Datenpipelines