Inżynier danych (Centrum kompetencji danych) w Sigma Software

Dołącz do Sigma Software, aby stanąć w czołówce najciekawszych projektów i odegrać kluczową rolę w rozwoju i sukcesie naszych inicjatyw oraz Centrum Kompetencji. KLIENT Weare poszukuje inżyniera danych, który nie tylko posiada dużą wiedzę specjalistyczną w zakresie inżynierii danych, ale jest również gotowy objąć rolę kierowcy, przyczyniając się do rozwoju Centrum kompetencji danych w Sigma Software. Poszukujemy osoby pasjonującej się przetwarzaniem danych, która bardzo pragnie rozwijać swoje umiejętności i wiedzę specjalistyczną w tej dziedzinie. OBOWIĄZKI Tworzenie potoków ETL, konfiguracji orkiestracji, automatyzacji CI/CD, skryptów itp. Analizowanie, organizowanie i interpretowanie surowych danych przy użyciu nowoczesnego stosu danych Tworzenie zapytań SQL w celu wydajnego manipulowania danymi Wnoszenie wkładu w przewodzimy doskonałości w inżynierii danych: badamy trendy w technologii i przeprowadzamy analizy najlepszych praktyk, aby mieć pewność, że nasze rozwiązania pozostają najnowocześniejszeWYMAGANIA Biegłość w budowaniu, utrzymywaniu, testowaniu i dostarczaniu wielkoskalowych potoków danych Wiedza ETL/ELT: Praktyczne doświadczenie z co najmniej jednym kompleksowym -end Solution oraz jego uruchomienie, rozwój i utrzymanie Dobra znajomość SQLDoświadczenie i zrozumienie teoretyczne w modelowaniu danych i optymalizacji baz danychCo najmniej 3 lata biegłości w Pythonie/Scala do przetwarzania i transformacji danychDoświadczenie ze Spark, ze szczególnym naciskiem na PySparkPraktyczne doświadczenie z głównymi frameworkami i bibliotekami w domenach Data Engineering: Spark, Kafka, Airflow itp., z potwierdzonym doświadczeniem w debugowaniu i optymalizacjiDoświadczenie z rozwiązaniami do przetwarzania danych w chmurze na AWS/AzureWOULDBE APLUSDatabricksDoświadczenie z inżynierią danych CI/CDDoświadczenie z narzędziami BI, takimi jak Tableau, Qlik, Grafana lub podobne бти центрі уаги найцкавших проєкті тавіaврa ннаову рроззй Аовник мишкаєо Inżynier danych, який нетільки має сильий досвіa внженерї даних, аотоовий зenia нenia лorm ті нашого центру кометенццц зобробки даних вSigma Oprogramowanie. Мишкаєо людину, яка захоплюється оtoś Ки створювати конвеєри etl, конфііццї оркеструаня, аnią аицццц ю о оуаіorm уати необроблені дані, використовючи счасний стек данихaNAS внесок урозвиток інженерї даних табути ліenia ццй галзз: досліжжczeń нолeniaйщ их практик, щоб гарарантуати, щонашш р ршенаня залишаюся нанайвищом ріenia тавRрадження конвеєрі даних великого оtoś иклу, аакож досreg його вRровадження, розвитку таобóch ззцї баз данихщонайенше 3роки досвіду роб John атичний досвід роботи зосновними фрейвворками тtośz udokumentowanym doświadczeniem w rozwiązywaniu problemów i optymalizacji Doświadczenie z rozwiązaniami do przetwarzania danych w chmurze na AWS/Azure BĘDZIE ATUTEM: Doświadczenie z CI/CD w inżynierii danych Doświadczenie z narzędziami BI takimi jak Tableau, Qlik, Grafana lub podobnymi Doświadczenie/certyfikacja Databricks