Инженер по обработке данных (ИТ-решения) в Sigma Software

25 июля 2024 г.

Data Engineer (IT Solutions)

Киев, Харьков, Львов, Днепр, Одесса, Винница, Ивано-Франковск, Луцк, Моршин, Полтава, Сумы, Тернополь, Черкассы, Черновцы, Будапешт (Венгрия), Бургас (Болгария), Варшава (Польша), Краков (Польша), удаленно self-service analytics project.

CUSTOMER

Sigma Software предоставляет top-quality software development, graphic design, testing, and support services. Systems разработали к ликвидатору customer benefits в automotive, telecommunications, aviation, advertising, gaming, banking, real estate, and healthcare industries.

PROJECT

Within на internal project в Sigma Software, имеет два первых goals: toautomate reporting and tocreate aself-service data analytics system for our company.

Вы будете респонсированы для дизайна и модификации данных в DWH и Data Marts, используя Spark и MS SQL, exposing this data to, and collaboraing with, BI engineers making reports в Apache Superset, и другие roles consuming such data . Additionally, вы работаете с различными другими группами людей, которые находятся на этой даты. Part of your task will involve transitioning our on-premises solution to a cloud-based environment.

RESPONSIBILITIES

• Мысленное решение является создание системы управления для сбора, обработки, анализа и visualizations of amounts of data from different sources

• Далее к фундаментальной и модели данных

• Развитие платформы для постройки и финансирования данных проектов, которые собирают данные от различных источников

• Create Data Warehouse

• Analyze and prepare domain descriptions in collaboration with Business analytics

• Create Data Marts

• Design apermission model with flexible control over vertical and horizontal access todata

REQUIREMENTS

• Conceptual knowledge ofdata analytics fundamentals, e.g., dimensional modeling, ETL/ELT, reporting tools, data governance, data warehousing, structured and unstructured data

• Сильный SQL knowledge and experience with RDBMS, confident knowledge ofdatabase fundamentals

• Experience in database development and data modeling, ideally with Databricks/Spark

• Experience with Python

• Experience with Azure

• Working knowledge of serialization formats and their trade-offs (columnar vs. row-based)

• Experience debugging and optimizing Spark jobs

• Живописные и verbal коммуникации skills

• Принимающийся к Уровню-Intermediate level of English < /p>

• BS in Computer Science or arelated field

• Experience with a Business Intelligence tool is a nice-to-have