Inżynier średniego Big Data w KITRUM

— 3-4 lata doświadczenia w inżynierii danych, tworzeniu lub zarządzaniu kompleksowymi potokami danych na dużych, złożonych zbiorach danych. — Doświadczenie w tworzeniu skalowalnego oprogramowania z wykorzystaniem technologii big data (np. Hadoop, Spark, Hive, Flink, Samza, Storm, Elasticsearch , Druid, Cassandra itp.) — Znajomość języka Scala — Biegła znajomość co najmniej jednego dialektu SQL — Poziom języka angielskiego: wyższy średniozaawansowany Dodatkowym atutem — Doświadczenie z platformami streamingowymi, zazwyczaj opartymi na platformie Kafka — Dobra znajomość usług platformy danych AWS i ich mocne/słabe strony — Duże doświadczenie w korzystaniu z Jira, Slack, JetBrains IDE, Git, GitLab, GitHub, Docker, Jenkins, Terraform — Doświadczenie w korzystaniu z DataBricks Client to amerykańska usługa subskrypcji e-booków i audiobooków, która obejmuje milion tytułów. Platforma udostępnia na swojej otwartej platformie wydawniczej 60 milionów dokumentów. Platforma umożliwia:— każdemu dzielenie się swoimi pomysłami ze światem;— dostęp do audiobooków; — dostęp do światowych kompozytorów, którzy publikują swoją muzykę; — zawiera artykuły od prywatnych wydawców i magazyny światowe; — umożliwia dostęp do ekskluzywnych treści. Platforma Core zapewnia solidne i podstawowe oprogramowanie, zwiększające doskonałość operacyjną w celu skalowania aplikacji i danych. Koncentrujemy się na budowaniu, testowaniu, wdrażaniu aplikacji i infrastruktury, które pomogą innym zespołom szybko skalować, współdziałać, integrować z danymi w czasie rzeczywistym i włączać uczenie maszynowe do swoich produktów. Współpracując z naszymi klientami z działów Data Science i Content Engineering oraz naszymi kolegami z wewnętrznych zespołów ds. narzędzi i infrastruktury, zapewniamy widoczność na poziomie systemów i skupienie się na naszych projektach. Celem klienta nie jest całkowita doskonałość architektoniczna lub projektowa, ale raczej wybór odpowiedniego produktu branżowego. oferuje równowagę pomiędzy szybkością, jakością i kosztami. ,[ Zarządzaj jakością i integralnością danych, Pomagaj w tworzeniu narzędzi i technologii, aby zapewnić, że dalsi klienci mogą mieć wiarę w dane, których używają, Wielofunkcyjna współpraca z zespołami ds. analityki danych lub inżynierii treści w celu rozwiązywania problemów, przetwarzania i optymalizacji działalności biznesowej -potoki krytyczne, Praca z platformą Core w celu wdrożenia lepszych zadań przetwarzania w celu skalowania zużycia strumieniowych zbiorów danych] Wymagania: Scala, Big Data, Hadoop, Spark, SQL Dodatkowo: Małe zespoły, Projekty międzynarodowe, Szkolenia Masterclazz, Lekcje języka angielskiego, Przyjazna atmosfera .