Inżynier Mid Data — zdalne i strategiczne rozwiązania kadrowe w Strategic Staffing Solutions

Strategic Staffing Solutions poszukuje inżyniera danych do wsparcia globalnego klienta z USA w branży naftowej i gazowej. Całkowicie odległy od Polski z opcjonalnym corocznym wyjazdem do siedziby w USA. Inżynier danych będzie wspierać naszych twórców oprogramowania, architektów baz danych, analityków danych i badaczy danych w inicjatywach związanych z danymi oraz zapewni spójność optymalnej architektury dostarczania danych w trakcie trwających projektów. Obowiązki Inżyniera Danych Tworzenie i utrzymywanie optymalnej architektury potoku danych. Składanie dużych, złożonych zestawów danych, które spełniają funkcjonalne/niefunkcjonalne wymagania biznesowe. Identyfikuj, projektuj i wdrażaj ulepszenia procesów wewnętrznych: automatyzację procesów ręcznych, optymalizację dostarczania danych, przeprojektowanie infrastruktury w celu uzyskania większej skalowalności itp. Zbuduj infrastrukturę wymaganą do optymalnej ekstrakcji, transformacji i ładowania danych z szerokiej gamy źródeł danych przy użyciu Technologie Big Data SQL i AWS. Twórz narzędzia analityczne, które wykorzystują potok danych, aby zapewnić praktyczny wgląd w pozyskiwanie klientów, efektywność operacyjną i inne kluczowe wskaźniki wydajności biznesowej. Współpracuj z zainteresowanymi stronami, w tym z zespołami wykonawczymi, produktami, danymi i projektami, aby pomagać w rozwiązywaniu problemów technicznych związanych z danymi i wspierać ich potrzeby w zakresie infrastruktury danych. Twórz narzędzia do przetwarzania danych dla analityków i członków zespołu analityków danych, które pomogą im w budowaniu i optymalizowaniu naszego produktu w kierunku innowacyjnego lidera branży. Współpracuj z ekspertami w dziedzinie danych i analityki, aby dążyć do większej funkcjonalności naszych systemów danych. Kwalifikacje dla inżyniera danych Zaawansowana znajomość języka SQL i doświadczenie w pracy z relacyjnymi bazami danych, tworzeniem zapytań (SQL), a także praktyczna znajomość różnych baz danych. Doświadczenie w budowaniu i optymalizowaniu potoków, architektur i zbiorów danych Big Data. Doświadczenie w przeprowadzaniu analizy przyczyn źródłowych na wewnętrznych i zewnętrznych danych i procesach, aby odpowiedzieć na konkretne pytania biznesowe i zidentyfikować możliwości ulepszeń. Silne umiejętności analityczne związane z pracą z nieustrukturyzowanymi zbiorami danych. Buduj procesy wspierające transformację danych, struktury danych, metadane, zarządzanie zależnościami i obciążeniem pracą. Historia udanej manipulacji, przetwarzania i wydobywania wartości z dużych, niepołączonych zbiorów danych. Praktyczna wiedza na temat kolejkowania wiadomości, przetwarzania strumieni i wysoce skalowalnych magazynów dużych zbiorów danych. Silne umiejętności zarządzania projektami i organizacji. Doświadczenie we wspieraniu i pracy z zespołami interdyscyplinarnymi w dynamicznym środowisku. Inżynier danych dołączy do zespołu ds. integracji linii produktów do konserwacji i kontroli powierzchni, aby budować i ulepszać niezawodne rozwiązania do integracji danych, aby lepiej wspierać inne zespoły produktowe. Doświadczenie w pozyskiwaniu, przygotowaniu i walidacji danych, przenoszeniu i transformacji danych w chmurze Azure na potrzeby integracji danych i procesów ETL. Doświadczenie z usługami w chmurze Azure, w tym Azure SQL Database, Azure Blob Storage, Azure Data Lake, Azure Data Factory, Azure Synapse. Biegłość w technologiach Big Data, takich jak Spark, Hadoop lub Kafka. Dobra znajomość SQL i rozwiązań hurtowni danych. Dobra znajomość języka programowania, takiego jak Python do przetwarzania danych. Zaznajomiony zPotok ADO CICD i ansible. Strategic Staffing Solutions poszukuje inżyniera danych do wsparcia globalnego klienta z USA w branży naftowej i gazowej. Całkowicie odległy od Polski z opcjonalnym corocznym wyjazdem do siedziby w USA. Inżynier danych będzie wspierać naszych twórców oprogramowania, architektów baz danych, analityków danych i badaczy danych w inicjatywach związanych z danymi oraz zapewni spójność optymalnej architektury dostarczania danych w trakcie trwających projektów. Obowiązki Inżyniera Danych Tworzenie i utrzymywanie optymalnej architektury potoku danych. Składanie dużych, złożonych zestawów danych, które spełniają funkcjonalne/niefunkcjonalne wymagania biznesowe. Identyfikuj, projektuj i wdrażaj ulepszenia procesów wewnętrznych: automatyzację procesów ręcznych, optymalizację dostarczania danych, przeprojektowanie infrastruktury w celu uzyskania większej skalowalności itp. Zbuduj infrastrukturę wymaganą do optymalnej ekstrakcji, transformacji i ładowania danych z szerokiej gamy źródeł danych przy użyciu Technologie Big Data SQL i AWS. Twórz narzędzia analityczne, które wykorzystują potok danych, aby zapewnić praktyczny wgląd w pozyskiwanie klientów, efektywność operacyjną i inne kluczowe wskaźniki wydajności biznesowej. Współpracuj z zainteresowanymi stronami, w tym z zespołami wykonawczymi, produktami, danymi i projektami, aby pomagać w rozwiązywaniu problemów technicznych związanych z danymi i wspierać ich potrzeby w zakresie infrastruktury danych. Twórz narzędzia do przetwarzania danych dla analityków i członków zespołu analityków danych, które pomogą im w budowaniu i optymalizowaniu naszego produktu w kierunku innowacyjnego lidera branży. Współpracuj z ekspertami w dziedzinie danych i analityki, aby dążyć do większej funkcjonalności naszych systemów danych. Kwalifikacje dla inżyniera danych Zaawansowana znajomość języka SQL i doświadczenie w pracy z relacyjnymi bazami danych, tworzeniem zapytań (SQL), a także praktyczna znajomość różnych baz danych. Doświadczenie w budowaniu i optymalizowaniu potoków, architektur i zbiorów danych Big Data. Doświadczenie w przeprowadzaniu analizy przyczyn źródłowych na wewnętrznych i zewnętrznych danych i procesach, aby odpowiedzieć na konkretne pytania biznesowe i zidentyfikować możliwości ulepszeń. Silne umiejętności analityczne związane z pracą z nieustrukturyzowanymi zbiorami danych. Buduj procesy wspierające transformację danych, struktury danych, metadane, zarządzanie zależnościami i obciążeniem pracą. Historia udanej manipulacji, przetwarzania i wydobywania wartości z dużych, niepołączonych zbiorów danych. Praktyczna wiedza na temat kolejkowania wiadomości, przetwarzania strumieni i wysoce skalowalnych magazynów dużych zbiorów danych. Silne umiejętności zarządzania projektami i organizacji. Doświadczenie we wspieraniu i pracy z zespołami interdyscyplinarnymi w dynamicznym środowisku. Inżynier danych dołączy do zespołu ds. integracji linii produktów do konserwacji i kontroli powierzchni, aby budować i ulepszać niezawodne rozwiązania do integracji danych, aby lepiej wspierać inne zespoły produktowe. ,[Projektuj, buduj i utrzymuj skalowalne hurtownie danych i rozwiązania big data przy użyciu Azure Synapse Analytics., Twórz i optymalizuj potoki danych integrujące różne źródła danych z Synapse., Monitoruj wydajność systemu i wykonuj dostrajanie wydajności zapytań w przypadku zapytań o dane na dużą skalę, rozwiązuj problemy problemy oraz zapewnić niezawodność systemu i dokładność danych.] Wymagania: Azure Cloud, ETL, Azure SQL Database, Blob Storage, Azure Data Lake, Azure Data Factory, Azure Synapse, Big data, Spark, Hadoop, Kafka, SQL, Hurtownia danych, Python, CI/CD Pipelines, Ansible, Azure Dodatkowo: Budżet szkoleniowy.