Starszy inżynier danych (rozwiązania IT) w Sigma Software

Poszukuję starszego inżyniera danych do kierowania małym zespołem i modernizacji prostej platformy danych w projekt samoobsługowej analizy w chmurze.

KLIENT
Sigma Software zapewnia najwyższej jakości usługi tworzenia oprogramowania, projektowania graficznego, testowania i wsparcia. Systemy opracowane w celu zapewnienia korzyści klientom z branży motoryzacyjnej, telekomunikacyjnej, lotniczej, reklamowej, gier, bankowości, nieruchomości i opieki zdrowotnej.

PROJEKT
W ramach projektu wewnętrznego w Sigma Software mamy dwa główne cele: automatyzację raportowania i stworzenie samoobsługowego systemu analizy danych dla naszej firmy.
Będziesz odpowiedzialny za projektowanie i modelowanie danych w DWH i Data Marts przy użyciu Spark i MS SQL , udostępniając te dane inżynierom BI tworzącym raporty w Apache Superset i współpracując z nimi, a także z innymi rolami korzystającymi z takich danych. Ponadto będziesz współpracować z różnymi innymi członkami zespołu, którzy korzystają z tych danych. Częścią Twojego zadania będzie przeniesienie naszego rozwiązania lokalnego do środowiska opartego na chmurze.

OBOWIĄZKI
• Naszym celem jest stworzenie efektywnego systemu gromadzenia danych , przetwarzaj, analizuj i wizualizuj duże ilości danych z różnych źródeł
• Stwórz podstawy i modeluj dane
• Opracuj platformę do budowania i utrzymywania potoków danych, które zbierają dane z różnych źródeł
• Utwórz hurtownię danych
• Analizuj i przygotowuj opisy domen we współpracy z analityką biznesową
• Twórz zbiory danych
• Zaprojektuj model uprawnień z elastyczną kontrolą pionowego i poziomego dostępu do danych

WYMAGANIA
• Wiedza koncepcyjna z zakresu podstaw analityki danych, np. modelowania wymiarowego, ETL/ELT, narzędzi raportowania, zarządzania danymi, hurtowni danych, danych ustrukturyzowanych i nieustrukturyzowanych
• Dobra znajomość języka SQL i doświadczenie w zakresie RDBMS, pewna znajomość podstaw baz danych
• Doświadczenie w tworzeniu baz danych i modelowaniu danych, najlepiej z Databricks/Spark
• Doświadczenie z Pythonem
• Doświadczenie z Azure< br/> • Praktyczna wiedza na temat formatów serializacji i ich kompromisów (kolumnowych lub wierszowych)
• Doświadczenie w debugowaniu i optymalizacji zadań Spark
• Silne umiejętności komunikacji pisemnej i werbalnej
• At co najmniej wyższy średniozaawansowany poziom języka angielskiego
• Licencjat z informatyki lub dziedziny pokrewnej
• Doświadczenie z narzędziem Business Intelligence będzie mile widziane

Ми шукаємо старшого жнжера з обр John проєкт з самобслуовуанням на основі харних технологйй.

зам tyle послуги з розробки програмного забезпечення, графічного дизайну, тестування та підтримки. Системи, розроблені для забезпечення потреб clієнтів в автомобільній, telекомунікаційній, aвіаційній, рекламній, ігровій, банківській сферах, нерухомості та охороні здоров'я.

ПРОЄКТ
У рамках внутрішнього проєкту w Sigma Software za pomocą mojego narzędzia: автоматизувати звітність w створити систему самообслуговув anndo analizy danych dla naszej firmy.

Będziesz odpowiedzialny za rozwój i modelowanie danych w DWH i Data Marts z wykorzystaniem Spark i MS SQL, dostarczanie tych danych inżynierom BI i współpraca z nimi, tworzenie raportów w Apache Superset i inne zadania związane z wykorzystaniem tych danych. Ponadto będziesz współpracować z innymi członkami zespołu, którzy korzystają z tych danych. Częścią Twojej pracy będzie także przeniesienie naszego lokalnego rozwiązania do środowiska chmurowego.

OBOWIĄZKI
Naszym celem jest stworzenie efektywnego systemu gromadzenia, przetwarzania, analizowanie i wizualizowanie dużych ilości danych z różnych źródeł

• Utwórz strukturę i model danych
• Opracuj platformę do budowania i utrzymywania potoków danych, które gromadzą dane z różnych źródeł
• Stwórz hurtownię danych
• Analizuj i przygotowuj opisy domen we współpracy z analitykami biznesowymi
• Twórz prezentacje danych
• Opracuj model uprawnień z elastycznym zarządzaniem pionowym i poziomym dostępem do danych
< br/>WYMAGANIA
• Znajomość koncepcyjna podstaw analityki danych, takich jak modelowanie wymiarowe, ETL/ELT, narzędzia raportowania, zarządzanie danymi, hurtownia danych, dane ustrukturyzowane i nieustrukturyzowane
• Głęboka znajomość SQL i RDBMS, solidna znajomość podstaw baz danych
• Doświadczenie w tworzeniu baz danych i modelowaniu danych, najlepiej z Databricks/Spark
• Doświadczenie w Pythonie
• Praktyczna wiedza na temat formatów serializacji i ich kompromisów ( kolumnowy vs. string)
• Doświadczenie w debugowaniu i optymalizacji zadań w Spark
• Silne umiejętności komunikacji pisemnej i werbalnej
• Znajomość języka angielskiego na poziomie średnio zaawansowanym
• Licencjat z informatyki lub dziedzin pokrewnych
/>Doświadczenie z narzędziem do analityki biznesowej będzie dodatkowym atutem