Starszy inżynier danych w Seeking Alpha

Seeking Alpha szuka utalentowanego i doświadczonego starszego inżyniera danych, który dołączy do nas.

W tym będziesz projektować, budować i utrzymywać infrastrukturę wymaganą do analizy dużych zbiorów danych. Jako ekspert w zakresie zarządzania danymi, procesów ETL (ekstrakcja, transformacja, ładowanie) i hurtowni danych będziesz pracować z różnymi technologiami Big Data, takimi jak bazy danych Hadoop, Spark i NoSQL.

Wykracza poza Twoją wiedzę techniczną będziesz potrzebować silnych umiejętności komunikacji i współpracy. Będziesz ściśle współpracować z zespołem ds. danych i analiz oraz innymi zainteresowanymi stronami, aby identyfikować i ustalać priorytety projektów inżynierii danych, zapewniając zgodność infrastruktury danych z ogólnymi celami biznesowymi.

Dlaczego jesteśmy świetną firmą pracować

Seeking Alpha to wiodące miejsce internetowe dla zaangażowanych inwestorów. Mamy wspaniały produkt. Nasze badania crowdsourcingowe i najnowocześniejsze narzędzia inwestycyjne pomagają prawie 300 000 płacących subskrybentów przekraczać ich cele finansowe.

Dbamy o równowagę między życiem zawodowym a prywatnym: pracujemy głównie w domu, zapewniamy wiele korzyści i nalegamy, abyś ciesz się nimi.

Inwestujemy w ludzi. Uważamy każdego pracownika za inwestycję długoterminową i dostrzegamy wartość w ciągłym doskonaleniu i szkoleniu naszych członków zespołu.

Jeśli tego też szukasz, nie wahaj się i aplikuj!

OBOWIĄZKI

• Ściśle współpracuj z badaczami/analitykami danych i innymi zainteresowanymi stronami, aby identyfikować i ustalać priorytety projektów inżynierii danych oraz zapewnienie zgodności infrastruktury danych z celami biznesowymi
• Projektowanie, budowanie i utrzymywanie optymalnej architektury potoku danych do ekstrakcji, transformacji i ładowania danych z szerokiej gamy źródeł danych, w tym zewnętrznych interfejsów API , strumienie danych i magazyny danych. 
• Stale monitoruj i optymalizuj wydajność i niezawodność infrastruktury danych oraz identyfikuj i wdrażaj rozwiązania poprawiające skalowalność, wydajność i bezpieczeństwo
• Bądź na bieżąco z najnowszymi trendami i rozwój w dziedzinie inżynierii danych oraz wykorzystaj tę wiedzę do identyfikacji możliwości doskonalenia i innowacji w organizacji
• Rozwiązuj trudne problemy w szybko zmieniającym się i rozwijającym się środowisku, zachowując bezkompromisową jakość.
• Wdrażaj wymagania dotyczące prywatności i bezpieczeństwa danych, aby zapewnić zgodność rozwiązań ze standardami i strukturami bezpieczeństwa.
• Zwiększ możliwości zespołu programistycznego.

• Licencjat lub tytuł magistra w dziedzinie informatyki, inżynierii lub pokrewnej dziedziny
• Ponad 2 lata udokumentowanego doświadczenia w opracowywaniu dużych skaluj oprogramowanie przy użyciu języka obiektowego lub funkcjonalnego
• Ponad 5 lat doświadczenia zawodowego w inżynierii danych, skupiającego się na budowaniu i utrzymaniu potoków danych i hurtowni danych
• Dodatkowe doświadczenie w Spark, Scala i Python, w tym umiejętność pisania wydajnego, łatwego w utrzymaniu kodu
• Doświadczenie z usługami AWS, w tym EC2, S3, Athena, Lambda i EMR
• Znajomość koncepcji i technologii hurtowni danych, takich jak pamięć kolumnowa, jeziora danych i SQL
• Doświadczenie w orkiestracji i harmonogramowaniu potoków danych przy użyciu narzędzi takich jak Airflow
• Silne rozwiązywanie problemów umiejętności i zdolność do samodzielnej pracy, a także jako część zespołu
• Wysoki poziom języka angielskiego - konieczność
• Gracz zespołowy z doskonałymi umiejętnościami współpracy

Miło jest mieć:

• Doświadczenie w zakresie Vertica lub Redshift, w tym doświadczenie w optymalizacji zapytań i dostrajaniu wydajności
< li>Doświadczenie w projektach związanych z uczeniem maszynowym i/lub nauką o danych
• Znajomość najlepszych praktyk w zakresie zarządzania danymi i bezpieczeństwa, w tym przepisów dotyczących prywatności danych, takich jak RODO i CCPA
• Znajomość wewnętrznych elementów Spark (dostrajanie , optymalizacja zapytań)