Ведущий инженер AI ML в A-Team Global

29 сентября 2024 г.

Ведущий инженер AI ML

Виддалено

В качестве ведущего инженера AI ML вы будете играть решающую роль в проектировании, разработке и развертывании машины. модели обучения и конвейеры данных. Идеальный кандидат возьмет на себя полную ответственность, начиная с определения проблемы и заканчивая предоставлением решений производственного уровня, что требует сильной инициативы и самостоятельного руководства. Вы будете тесно сотрудничать с инженерами по данным, учеными, занимающимися данными, и заинтересованными сторонами в бизнесе, чтобы создавать масштабируемые решения, которые помогут принимать эффективные бизнес-решения. Ваш опыт работы с различными инструментами обработки данных и машинного обучения будет иметь важное значение для управления нашей инфраструктурой данных и реализации высококачественных проектов искусственного интеллекта и машинного обучения.

• Степень бакалавра или магистра в области компьютерных наук, науки о данных, инженерии или смежных областях
• Знание SQL и Python
• Опыт работы с инструментами интеграции данных, такими как Airbyte
• Хорошее знание концепций хранилищ данных и практический опыт работы со Snowflake.
• Опыт работы с инструментами преобразования данных, такими как dbt.
• Умение использовать Databricks и Apache Spark для обработки больших данных и машинного обучения < /li>
• Знакомство с Delta Lake для управления озером данных
• Опыт работы с инструментами визуализации данных, такими как Tableau
• Опыт работы с реляционными базами данных, такими как MySQL и PostgreSQL
• Сильные аналитические навыки и навыки решения проблем.
• Отличные коммуникативные способности и способности к командной работе.
• Способность работать в быстро меняющейся и динамичной среде

Предпочтительная квалификация:

• Сильный индивидуальный подход к участию, демонстрация высокой самостоятельности
• Знание библиотеки и платформы машинного обучения, такие как TensorFlow, PyTorch или Scikit-Learn.
• Опыт работы с облачными платформами, такими как AWS, GCP или Azure.
• Соответствующие сертификаты в области инжиниринга данных, машинного обучения, или облачные технологии

Обязанности:

• Проектирование, разработка и развертывать модели машинного обучения с помощью Databricks и Apache Spark.
• Внедрять конвейеры предварительной обработки данных, разработки функций и обучения моделей.
• Использовать dbt (инструмент построения данных) для преобразования и моделирования данных в Snowflake. для подготовки наборов данных для машинного обучения.
• Используйте SQL и Python для анализа больших наборов данных, получения значимой информации и создания наборов обучающих данных.
• Проведите исследовательский анализ данных для выявления тенденций, закономерностей и аномалий < /li>
• Разрабатывать и поддерживать конвейеры ETL с помощью Airbyte для приема данных из различных источников в Snowflake.
• Управлять и оптимизировать хранение и извлечение данных с помощью Delta Lake на Databricks, чтобы обеспечить эффективный доступ к моделям машинного обучения.
• >
• Создавайте и обслуживайте интерактивные информационные панели и визуализации в Tableau для передачи результатов моделей и информации заинтересованным сторонам.
• Сотрудничайте с учеными по данным для уточнения и улучшения моделей машинного обучения.
• Мониторинг и оценка производительность развернутых моделей, гарантируя, что они соответствуют точностиопределение стандартов производительности
• Работа с реляционными базами данных, такими как MySQL и PostgreSQL, для хранения и управления данными по мере необходимости.
• Эффективно сообщать сложные технические концепции и результаты нетехническим заинтересованным сторонам.
< /ul>