Senior Big Data Engineer (Anforderungen der Web- und Mobileinheit) in Sigma Software Group

UnternehmensbeschreibungSuchen Sie ein Team von Fachleuten auf dem neuesten Stand der Technik? Suchen Sie nach einem Ort, an dem Sie Ihre Big-Data-Karriere vorantreiben können? Wir laden Sie ein, unserem Big Data Competence Center beizutreten, das Teil der komplexen Organisationsstruktur von Sigma Software ist, die verschiedene Kunden, interessante Projekte und Aktivitäten vereint, um Ihre beruflichen Fähigkeiten zu erweitern.KUNDEWir sind in verschiedenen Geschäftsbereichen tätig und arbeiten mit den besten Kunden zusammen (Diejenigen ohne NDAs finden Sie hier: sigma.software/case-studies). Unser Team unterstützt in hohem Maße die Freiheit und Unabhängigkeit der Mitarbeiter bei der Entscheidungsfindung sowie den Wunsch, die Wünsche des Kunden tiefgreifend zu verstehen und die Wurzel des Problems zu erkennen. Wir glauben, dass Menschen, die diese Denkweise anstreben, mit Sicherheit als anerkannte Fachleute und treibende Kraft der Big-Data-Entwicklung in der Ukraine erfolgreich sein werden. PROJEKT Im Big Data Competence Center sammeln wir die besten technischen Praktiken und vereinen sie in einer Wissensbasis, um die beste technische Exzellenz bereitzustellen Dienstleistungen für unsere Kunden. Wir sind nicht nur ein Team, das sich versammelt hat, um Code zu schreiben. Wir alle sind bereit, einen Beitrag auf diesem Gebiet zu leisten, indem wir am Leben der Big Data Unit teilnehmen oder unsere Fähigkeiten ständig erweitern. In unserer Einheit können Sie ein Big-Data-Ingenieur/Teamleiter/Architekt sein, oder Sie können ein Mentor oder eine Person hinter allen neuen Technologien im Team werden, oder ein aktiver Zuhörer, wenn Sie so wollen. Wie auch immer Sie sich entscheiden, stellen Sie sicher, dass Sie nicht allein sind. Ganz gleich, ob es sich um eine schwierige Aufgabe, eine außergewöhnliche Kundenanfrage oder Ihr nächstes Projekt handelt, Sie haben immer einen Mentor und Teamkollegen mit der gleichen Einstellung, um die beste Lösung zu finden. Wir verfolgen einen ungewöhnlichen Ansatz und stellen Leute ein, die nicht dafür geeignet sind ein bestimmtes Projekt, sondern in erster Linie Teil unseres Teams zu werden. Dies gibt uns die Chance, Sie besser kennenzulernen und sicherzustellen, dass wir eine perfekte Übereinstimmung zwischen den Bedürfnissen des Kunden und Ihren beruflichen Interessen bieten. Wenn Sie den Mut haben, Teil der erstklassigen Big-Data-Community in der Ukraine zu werden, schnappen Sie sich Ihre Chance, und lasst uns gemeinsam etwas Geschichte schreiben!StellenbeschreibungBeitrag zu Untersuchungen neuer Technologien und zum Entwurf komplexer Lösungen, Unterstützung einer Innovationskultur unter Berücksichtigung von Fragen der Sicherheit, Skalierbarkeit und Zuverlässigkeit mit dem Schwerpunkt auf dem Aufbau unserer ETL-ProzesseArbeiten mit einem modernen Datenstapel, Produktion Gut gestaltete technische Lösungen und robusten Code sowie Implementierung von Data-Governance-Prozessen. Zusammenarbeit und professionelle Kommunikation mit dem Team des Kunden. Übernahme der Verantwortung für die Bereitstellung wichtiger Lösungsfunktionen. Teilnahme am Anforderungserfassungs- und Klärungsprozess, Vorschlag optimaler Architekturstrategien, Leitung der Implementierung der Datenarchitektur. Entwicklung von Kernmodulen und -funktionen. Entwerfen skalierbarer und kostengünstiger Lösungen. Durchführen von Codeüberprüfungen, Schreiben von Unit- und Integrationstests. Skalieren des verteilten Systems und der Infrastruktur auf die nächste Ebene. Aufbau einer Datenplattform unter Nutzung der Leistungsfähigkeit moderner Cloud-Anbieter (AWS/GCP/Azure). Zusätzliche Verantwortlichkeiten. Diese Verantwortlichkeiten werden Ihnen helfen, sich beruflich weiterzuentwickeln kann je nach Projekt und dem Wunsch, Ihre Rolle im Unternehmen in der AWS-Cloud zu erweitern, variierenTeam und aktiver Beitrag zur PartnerschaftEntwicklung der Micro Batch/Echtzeit-Streaming-Pipelines (Lambda-Architektur)Arbeit an POCs zur Validierung vorgeschlagener Lösungen und MigrationenLeitung der Migration auf moderne Technologieplattformen, Bereitstellung technischer AnleitungEinhaltung von CI/CD-Methoden, Unterstützung bei der Implementierung von Best Practices im TeamBeitrag zum Einheitenwachstum, Betreuung anderer Teammitglieder (optional)Verantwortung der gesamten Pipeline und Optimierung der Engineering-ProzesseEntwerfen komplexer ETL-Prozesse für Analyse und Datenmanagement, Vorantreiben der massiven ImplementierungQualifikationen5+ Jahre Erfahrung mit Python und SQLErfahrung mit AWS, insbesondere API Gateway, Kinesis, Athena, RDS und AuroraErfahrung im Aufbau von ETL-Pipelines für Analysen und interne AbläufeErfahrung im Aufbau interner APIs und Integration mit externen APIsArbeiten mit dem Linux-BetriebssystemEffektive Kommunikationsfähigkeiten, insbesondere zum Erklären technischer Konzepte für technisch nicht versierte UnternehmensleiterWunsch, in einem dynamischen, forschungsorientierten Umfeld zu arbeiten orientiertes TeamErfahrung mit verteilten Anwendungskonzepten und DevOps-ToolsAusgezeichnete Schreib- und KommunikationsfähigkeitenFehlerbehebungs- und Debugging-FähigkeitenWERDEN EIN PLUS sein2+ Jahre Erfahrung mit Hadoop, Spark und AirflowErfahrung mit DAGs und OrchestrierungstoolsPraktische Erfahrung mit der Entwicklung von Snowflake-gesteuerten Data WarehousesErfahrung mit der Entwicklung ereignisgesteuerter Datenpipelines Show mehr Weniger anzeigen Старший середній рівень Тип зайнятості Повний робочий день Посадові обов'язки Інженерія и ІнFORMATIK Галузи Розробка програмного забезпечення