Старший/ Перший Інженер з Даних

Резюме посади

Старший/перший інженер даних відіграє важливу роль у створенні, підтримці та вдосконаленні процесів ETL, які сприяють нашим аналітичним та машинним навчальним платформам. Ця особа буде генерувати корисні висновки зі складних наборів даних та тісно співпрацювати з різними бізнес-одиницями, щоб впливати на стратегію та прийняття рішень.

Ви будете першим працівником цього напрямку.

Місцезнаходження

• Затока Сан-Франциско, Нью-Йорк або дистанційно

Основні обов'язки

1. Розробка ETL та Backend:

• Проектування та удосконалення трубопроводів ETL.

• Створення надійних бекенд-систем для обробки даних великого масштабу за допомогою Elixir та рішень для баз даних, таких як Cassandra/ScyllaDB.

1. Архітектура даних:

• Створення масштабованих та ефективних моделей даних для Cassandra та ScyllaDB.

• Гарантія цілісності, якості та безпеки даних.

1. Підтримка в галузі даних:

• Співпраця з науковцями-дослідниками даних, надаючи їм чисті та надійні набори даних.

• Допомога у впровадженні та масштабуванні моделей даних.

1. Іновації та дослідження:

• Бути в курсі останніх технологій.

• Прийняти технічні пропозиції з покращення обробки та зберігання даних.

Кваліфікація

Вимоги

• Бакалаврський або магістерський диплом з комп'ютерних наук, інженерії або суміжної технічної галузі.

• Мінімум 5 років досвіду у бекенд-розробці, переважно в галузі інженерії даних.

  • Технічні навички: володіння Python, Java, Scala, Elixir для бекенд-розробки та процесів ETL.

  • Знання інструментів/фреймворків ETL (наприклад, Apache Kafka, Apache Airflow).

  • Глибокі знання SQL/NoSQL баз даних, включаючи Cassandra та ScyllaDB, та рішення для сховищ даних (наприклад, Redshift, BigQuery, Snowflake).

  • Вміння працювати з хмарними платформами (AWS, GCP, Azure) та розподіленими системами.

  • Розуміння концепцій дослідження даних, інструментів та бібліотек (наприклад, Pandas, Scikit-learn).

  • М'які навички: виняткові навички рішення проблем.

  • Відмінні комунікаційні навички для технічних та нетехнічних обговорень.

Бажано мати

• Досвід роботи з хмарними платформами, такими як AWS, GCP або Azure.

• Видатні комунікаційні навички, як усні, так і письмові.

• Досвід роботи з алгоритмами машинного навчання та фреймворками (наприклад, TensorFlow, PyTorch, scikit-learn).

Пільги

• Конкурентоспроможна заробітна плата (150 000 - 225 000 доларів на рік) та опціони на акції

• Повне медичне, стоматологічне та зорове страхування

• 401(k)

• Гнучкий графік роботи та можливості віддаленої роботи

• Регулярні командоутворювальні заходи та активності