Інженер даних @ AVENGA в AVENGA

Клієнту потрібна допомога, щоб створити основу інфраструктури на Google Cloud Platform (GCP) і перенести своє поточне застаріле озеро даних у кероване, масштабоване та безпечне озеро даних у хмарі, яке може забезпечити можливості аналізу даних, необхідні для задоволення їхніх зростаючих потреб. Клієнту потрібна допомога в оцінці, проектуванні, плануванні та перенесенні наявного локального або хмарного озера даних у Google Big Query. Клієнту потрібна допомога, щоб створити основу інфраструктури на Google Cloud Platform (GCP) і перенести своє поточне застаріле озеро даних у кероване, масштабоване та безпечне озеро даних у хмарі, яке може забезпечити можливості аналізу даних, необхідні для задоволення їхніх зростаючих потреб. Клієнту потрібна допомога в оцінці, проектуванні, плануванні та перенесенні наявного локального або хмарного озера даних у Google Big Query. ,[Оцініть поточну систему, включаючи потоки, конвеєри даних, схеми та звіти. , Зосередьтеся на таких сферах: , Провідні методи управління даними, визначення, інструкції, процеси та рекомендації для продуктів, доступних у GCP: каталог даних, родовід даних, якість даних, маскування даних, класифікація даних, набори даних та аналітична інфраструктура, база даних і прикладна технологія , Робочі навантаження вилучення, перетворення та завантаження (ETL) або вилучення, завантаження та перетворення (ELT) , Оркестровка роботи та потреби в плануванні , План постачання інструментів (включаючи підтримку наприкінці терміну служби) , Плани безперервної інтеграції між програмами , Бізнес-підрозділи та інші команди, які використовують рішення для обробки даних, технічний стан «як є» для проаналізованих вище областей, бажаний майбутній стан для перетворення даних, озера даних або аналітики даних] Вимоги: Python, BigQuery, Dataflow, хмарна платформа Google, інструменти Spark: . Додатково: Спортивний абонемент, Приватна медицина, Міжнародні проекти, Безкоштовна кава, Без дрес-коду.