Big Data Engineer (переїзд на Близький Схід) за кордоном Про посаду: < p> Ми шукаємо талановитих інженерів великих даних, щоб приєднатися до нашої динамічної команди для нового захоплюючого проекту. Це унікальна можливість попрацювати над передовою ініціативою, створити команду з нуля в швидкоплинному середовищі. Якщо ви захоплюєтеся технологіями великих даних і готові до нового виклику, ми хочемо почути вашу думку! Цей довгостроковий проект вимагає від інженерів приєднатися якомога швидше та
Big Data Engineer (переїзд на Близький Схід)
за кордоном
Про посаду:
< p> Ми шукаємо талановитих інженерів великих даних, щоб приєднатися до нашої динамічної команди для нового захоплюючого проекту. Це унікальна можливість попрацювати над передовою ініціативою, створити команду з нуля в швидкоплинному середовищі. Якщо ви захоплюєтеся технологіями великих даних і готові до нового виклику, ми хочемо почути вашу думку!
Цей довгостроковий проект вимагає від інженерів приєднатися якомога швидше та переїхати на Близький Схід.
Вимоги:
- Досконале володіння Hadoop та екосистемою HDFS.
- Принаймні 3 роки досвіду роботи з технологією обробки даних.
- Широке знайомство з платформою даних Cloudera та її компонентами середовища виконання.
- Сильний досвід роботи з Apache Spark.
- Практичний досвід роботи з однією чи кількома мовами програмування, такими як Python, Go або Java.
- Тверді базові знання про комп’ютерне програмне забезпечення, включно з операційними системами Linux, сховищами, мережевим введенням/виведенням і пов’язаними принципами.
- Досвід роботи з обчислювальними, розподіленими системами або системами великих даних (наприклад, Nginx, Kubernetes, Docker, OpenStack, Kafka) є перевагою.
- Надзвичайно бажано володіти хорошою структурою даних і навичками проектування системи.
Обов’язки:
- Нагляд за налаштуванням, конфігурацією та обслуговуванням кластерів Hadoop і екосистеми HDFS.
- Забезпечення цілісності та доступності даних у розподіленій файловій системі Hadoop.
- Проектування, розробка та підтримка масштабованих конвеєрів даних.
- Впроваджуйте процеси надходження даних, щоб збирати й ефективно зберігати великі обсяги даних.
- Співпрацюйте з науковцями та аналітиками даних, щоб задовольнити їхні потреби в даних.
- Керуйте та оптимізуйте платформу даних Cloudera та її компоненти середовища виконання.
- Відстежуйте продуктивність системи та вирішуйте проблеми, щоб забезпечити високу доступність і надійність.
- Розробляти та підтримувати програми Apache Spark для обробки даних.
- Напишіть і обслуговуйте код такими мовами програмування, як Python, Go або Java.
- Застосовувати міцні базові знання про комп’ютерне програмне забезпечення, зокрема операційні системи Linux, сховище, мережевий ввід-вивід та пов’язані принципи.
- Використовуйте досвід роботи з обчислювальними, розподіленими системами або системами великих даних (наприклад, Nginx, Kubernetes, Docker, OpenStack, Kafka).
- Застосовуйте сильні навички структурування даних і системного проектування, щоб розробляти надійні рішення.