Старший інженер з даних в CHI Software

Команда CHI Software не стоїть на місці. Ми любимо свою роботу і віддаємося їй на всі сто відсотків! Кожен новий проект – це виклик, з яким ми успішно справляємося. Єдине, що може нас зупинити, це... Зачекайте, це нічого! Кількість проектів зростає, а разом з ними і наша команда. І тепер нам потрібен старший інженер з даних.

Ми шукаємо кваліфікованого та досвідченого інженера з обробки даних. Ідеальний кандидат буде глибоко залучений до відкриття, аналізу та збирання великих і складних наборів даних. Вони розроблятимуть і створюватимуть нашу інфраструктуру великих даних, забезпечуватимуть безпеку даних і оптимізуватимуть продуктивність наших платформ великих даних, головним чином у хмарному середовищі AWS.
 

Вимоги:

• Ступінь бакалавра інформатики або спорідненої галузі.
• 3-4+ роки досвіду розробки даних і створення платформ даних.
• Продемонстрований успіх у розгортанні продуктів моделі хмари та SaaS, з досвідом у побудові оптимізованих конвеєрів обробки для додатків потокової аналітики.
• Досвід роботи з базами даних і оптимізацією запитів (PostgresSQL, ElasticSearch, MongoDB, Redis, Druid), включаючи досвід роботи з Бази даних NoSQL і графіки. Досвід роботи з базами даних із горизонтальним масштабуванням.
• Досвід у Kafka та Airflow із точним розумінням інструментів профілювання часу виконання.
• Досвід у системах обробки великих даних, подібних до Apache Spark , Flink, Beam або подібні.
• Навички автоматизації збирання, постійної інтеграції та інструментів розгортання (CI/CD) (Webpack, Buddy, Jenkins, Docker).
• Експертний рівень Навички кодування на Python.
• Cloud Platform AWS.
• Рівень розмовної англійської мови, що забезпечує ефективне спілкування з клієнтами та членами команди.

Бажані навички:

• Технічна підготовка в AI та ML.
• Досвід у розробці та впровадженні інтерактивних систем інтелекту на основі запитів головної машини.< /li>
• Досвід роботи з розподіленими командами.

Обов’язки:

• Розробка та впровадження розподілені системи обробки даних у реальному часі, які аналізують загальнодоступні дані та виявляють нові загрози
• Розробка та оптимізація процесів ETL для різних форматів даних із соціальних мереж, новин і веб-джерел.
• Розробка та впровадження надійні системи баз даних і розробляти інструменти для запитів і аналітичної обробки, зосереджуючись на додатках потокового передавання в реальному часі.
• Очолюйте автоматизацію створення, постійну інтеграцію, розгортання та оптимізацію продуктивності, дотримуючись наших суворих вимог безпеки.
• Створюйте набори тестів і впроваджуйте вбудовані інструменти для забезпечення правильності даних.

Наші переваги

• Покритий період відпустки: 20 робочих днів і 5 вихідних.
• Безкоштовні заняття з англійської.
• Гнучкий графік роботи.
• Справді дружня та підтримуюча атмосфера.
• Робота дистанційно або в одному з наших офісів.
• Медична страховка для співробітників з України.
• Оплата психологічної консультації.
• Юридична підтримка.< /li>
• Допомога у переїзді.