Старший інженер з даних в Seeking Alpha

Seeking Alpha шукає талановитого та досвідченого старшого інженера з даних, щоб приєднатися до нас.

У цьому роль, ви будете проектувати, створювати та підтримувати інфраструктуру, необхідну для аналізу великих наборів даних. Як експерт із керування даними, процесів ETL (вилучення, перетворення, завантаження) і сховищ даних, ви працюватимете з різними технологіями великих даних, такими як бази даних Hadoop, Spark і NoSQL.

Крім вашого технічного досвіду , вам знадобляться сильні навички спілкування та співпраці. Ви тісно співпрацюватимете з командою обробки даних і аналітики та іншими зацікавленими сторонами, щоб визначати та визначати пріоритети проектів обробки даних, забезпечуючи відповідність інфраструктури даних загальним цілям і завданням бізнесу.

Чому ми чудова компанія для роботи

Seeking Alpha є провідним онлайн-напрямком для зацікавлених інвесторів. У нас є чудовий продукт. Наші краудсорсингові дослідження та передові інструменти інвестування допомагають майже 300 000 підписників перевищити свої фінансові цілі.

Ми дбаємо про баланс між роботою та особистим життям: ми працюємо переважно вдома, надаємо багато бонусів і наполягаємо, щоб ви насолоджуйтесь ними.

Ми інвестуємо в людей. Ми вважаємо кожного працівника довгостроковою інвестицією та бачимо цінність у постійному вихованні та навчанні наших товаришів по команді.

Якщо це те, що ви також шукаєте, подайте заявку!

ОБОВ’ЯЗКИ

• Тісно співпрацювати з науковцями/аналітиками даних та іншими зацікавленими сторонами, щоб визначити та визначити пріоритети проектів обробки даних а також гарантувати, що інфраструктура даних узгоджується з бізнес-цілями та завданнями
• Розробляти, створювати та підтримувати оптимальну архітектуру конвеєра даних для вилучення, перетворення та завантаження даних із різноманітних джерел даних, включаючи зовнішні API , потоки даних і сховища даних. 
• Постійно відстежуйте та оптимізуйте продуктивність і надійність інфраструктури даних, а також визначайте та впроваджуйте рішення для покращення масштабованості, ефективності та безпеки.
• Будьте в курсі останніх тенденцій і розробок у сфері інженерії даних, а також використовувати ці знання для виявлення можливостей для вдосконалення та інновацій в організації
• Вирішувати складні проблеми в середовищі, що швидко змінюється та розвивається, зберігаючи при цьому безкомпромісну якість.
• Застосуйте вимоги до конфіденційності та безпеки даних, щоб переконатися, що рішення відповідають стандартам і структурам безпеки.
• Покращте можливості команди щодо розробки.

• Ступінь бакалавра або магістра в галузі комп’ютерних наук, інженерії або суміжної галузі
• 2+ роки перевіреного досвіду розробки великих масштабоване програмне забезпечення з використанням об’єктно-орієнтованої або функціональної мови
• 5+ років професійного досвіду в інженерії даних, зосереджуючись на створенні та підтримці конвеєрів даних і сховищ даних
• Великий досвід роботи зі Spark, Scala та Python, включаючи можливість писати високопродуктивний код, який зручно підтримувати
• Досвід роботи з сервісами AWS, зокрема EC2, S3, Athena, Lambda та EMR
• Знайомство з концепціями та технологіями сховищ даних, такими як стовпчасте сховище, озера даних і SQL
• Досвід оркестровки конвеєрів даних і планування за допомогою таких інструментів, як Airflow
• Спроможність розв’язувати проблеми навички та вміння працювати як самостійно, так і в команді
• Англійська на високому рівні – обов’язково
• Командний гравець із чудовими навичками співпраці

Приємно мати:

• Досвід роботи з Vertica або Redshift, зокрема досвід оптимізації запитів і налаштування продуктивності
< li>Досвід роботи з машинним навчанням та/або проектами з обробки даних
• Знання найкращих практик керування даними та безпеки, зокрема норм конфіденційності даних, таких як GDPR і CCPA
• Знання внутрішніх функцій Spark (налаштування , оптимізація запитів)