Інженер ML Ops в Solvd Inc

12 вересня 2024 р

ML Ops Engineer

Київ, віддалено

Solvd Inc. є провідною компанією з розробки програмного забезпечення. У нас 8 офісів по всьому світу та понад 800 міжнародних співробітників. Маючи понад 12 років досвіду, висококваліфіковані команди в усьому світі та глибокі знання галузі, ми допомагаємо клієнтам створювати програмне забезпечення, яке покращує їхні операції та відкриває нові ринки. Ми створили вражаючий реєстр цифрових корпоративних клієнтів, включаючи деякі з найбільших брендів у роздрібній торгівлі та соціальних мережах.

Ми шукаємо досвідченого ML Ops Engineer , щоб приєднатися до нашої динамічної команди.

У цій ролі ви відповідатимете за керування інфраструктурою машинного навчання та розгортання моделей у виробничих середовищах. Ви працюватимете з такими інструментами, як AWS, AWS CloudFormation, AWS SageMaker і платформою Databricks, включно з каталогом Unity, щоб оптимізувати та підтримувати наші наскрізні конвеєри машинного навчання.

Основні обов’язки:

• Керування інфраструктурою ML: Створення, керування та підтримка масштабованої інфраструктури ML за допомогою таких служб AWS, як EC2, SageMaker, S3, і шаблони CloudFormation.
• Розгортання моделі: Автоматизуйте розгортання моделей машинного навчання у виробництві за допомогою AWS SageMaker і Databricks, забезпечуючи постійну доступність і продуктивність.
• Автоматизація CloudFormation: Використовуйте AWS CloudFormation, щоб визначати та надавати інфраструктуру для робочих навантажень ML, забезпечуючи інфраструктуру як найкращий код.
• Управління та управління даними: Використовуйте Databricks Unity Catalog для керування даними, безпеки та відповідності, забезпечуючи високу якість даних і спрощені процеси навчання моделей.
• Моніторинг та оптимізація: Впроваджуйте та відстежуйте моделі у виробництві за допомогою таких інструментів, як AWS CloudWatch і рішення для моніторингу Databricks. Усуньте вузькі місця продуктивності та забезпечте точність моделі з часом.
• Співпраця з групами обробки даних: тісно співпрацюйте з науковцями та інженерами даних, щоб оптимізувати робочі процеси розробки моделей і виробництва, забезпечуючи безперебійну співпрацю.
• Автоматизовані конвеєри ML  : створюйте та підтримуйте конвеєри CI/CD для моделей ML за допомогою AWS і Databricks. Переконайтесь, що моделі постійно перевіряються, контролюються та за необхідності перенавчаються.

Необхідні навички:

• Експертиза AWS: Глибоке знання служб AWS, зокрема AWS SageMaker, CloudFormation, EC2, S3, і CloudWatch.
• CloudFormation: Досвід створення, керування та автоматизації ресурсів AWS за допомогою шаблонів AWS CloudFormation.
• Досвід Databricks: Експертиза в платформі Databricks і каталозі Unity із можливістю керувати великомасштабними конвеєрами даних і забезпечувати продуктивність моделі в масштабі.
• Розгортання ML: Перевірений досвід розгортання моделей машинного навчання у виробничих середовищах за допомогою AWS SageMaker і Databricks.
• Конвеєри CI/CD: Тверде розуміння конвеєрів CI/CD і керування версіями, зокрема в контексті моделей машинного навчання.
• Навички програмування: Хороші навички кодування на Python зі знанням бібліотек ML, таких як TensorFlow, PyTorch і scikit-learn.
• Моніторинг і журналювання: досвід налаштування та керування моніторингом і журналюванням для виробничих моделей, відстеження продуктивності та виявлення аномалій.
• Розуміння DevOps: Знайомство з принципами DevOps та автоматизацією інфраструктури, досвід використання Docker, Kubernetes або інших інструментів контейнеризації/оркестровки.