Starszy inżynier danych (rozwiązania IT) w Sigma Software Group

Opis firmy Poszukuję starszego inżyniera danych do kierowania małym zespołem, modernizacji prostej platformy danych do samoobsługowego projektu analitycznego w chmurze. KLIENCI Sigma Software zapewnia najwyższej jakości usługi tworzenia oprogramowania, projektowania graficznego, testowania i wsparcia. Systemy opracowane w celu dostarczania korzyści klientom z branży motoryzacyjnej, telekomunikacyjnej, lotniczej, reklamowej, gier, bankowości, nieruchomości i opieki zdrowotnej.PROJEKTW ramach wewnętrznego projektu w Sigma Software mamy dwa główne cele: automatyzację raportowania i stworzenie samoobsługi system analizy danych dla naszej firmy. Będziesz odpowiedzialny za projektowanie i modelowanie danych w DWH i Data Marts przy użyciu Spark i MS SQL, udostępnianie tych danych i współpracę z inżynierami BI tworzącymi raporty w Apache Superset oraz innymi rolami zużywającymi takie dane . Ponadto będziesz współpracować z różnymi innymi członkami zespołu, którzy korzystają z tych danych. Częścią Twojego zadania będzie przeniesienie naszego rozwiązania on-premise do środowiska opartego na chmurze. Opis stanowiskaNaszym celem jest stworzenie wydajnego systemu do gromadzenia, przetwarzania, analizowania i wizualizacji dużych ilości danych z różnych źródeł. Stworzenie podstaw i modelu daneRozwiń platformę do budowy i utrzymania potoków danych zbierających dane z różnych źródełUtwórz hurtownię danychAnalizuj i przygotuj opisy domen we współpracy z analityką biznesową Utwórz Data MartsZaprojektuj model uprawnień z elastyczną kontrolą pionowego i poziomego dostępu do danychKwalifikacjeKoncepcyjna wiedza z podstaw analityki danych, m.in. , modelowanie wymiarowe, ETL/ELT, narzędzia raportowania, zarządzanie danymi, hurtownia danych, dane ustrukturyzowane i nieustrukturyzowane Dobra znajomość SQL i doświadczenie z RDBMS, pewna znajomość podstaw baz danych Doświadczenie w tworzeniu baz danych i modelowaniu danych, najlepiej z Databricks/Spark Doświadczenie z PythonWorking znajomość formatów serializacji i ich kompromisów (kolumnowych lub wierszowych) Doświadczenie w debugowaniu i optymalizacji zadań Spark Silne umiejętności komunikacji pisemnej i werbalnej Co najmniej wyższy średniozaawansowany poziom angielskiego licencjata z informatyki lub pokrewnej dziedziny Doświadczenie w biznesie Narzędzie wywiadowcze to przydatne narzędzie. Pokaż więcej Pokaż mniej Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обо в'язки Інформаційні технології Галузі Розробка програмного забезпечення