Principal Data Engineer - AWS

NorthBay Solutions шукає висококваліфікованого Головного інженера даних із спеціалізацією в AWS. Ми шукаємо експерта з ідеальним профілем, який має від 8 до 10 років досвіду в інженерії даних, готового вирішувати складні завдання та вдосконалювати наші технологічні рішення.

На посаді Головного інженера даних в NorthBay Solutions ви будете керувати критичними ініціативами в області даних та впроваджувати інноваційні технології в різноманітних проектах. Ваша роль полягатиме в проєктуванні, розробці та підтримці сучасних інфраструктур для аналізу даних. Вам слід володіти гострою здатністю видобувати інсайти з великих наборів даних та відчувати себе впевнено в динамічному середовищі, яке заохочує експериментування та розв'язання проблем.

Для успіху на цій посаді ви повинні виявити:

• Сильне володіння SQL, Python, PySpark та Delta Lake.
• Великий досвід роботи з AWS Kinesis для потокового введення даних.
• Глибоке розуміння архітектурних фреймворків даних, таких як озера даних, будинки озер і мережі даних.
• Міцні знання в галузі інженерії даних спеціально на платформі Amazon Cloud, включно, але не обмежуючись, сервісами AWS, як-от S3, Lambda, EC2 та Redshift.
• Здатність обробляти великомасштабні структуровані та неструктуровані набори даних і глибоке розуміння складання даних, моделювання даних та процесів ETL.
• Доведений досвід надання можливостей CI/CD і DevOps у середовищах даних.
• Володіння Jira, методологіями Agile та знайомство з інструментами візуалізації, такими як AWS QuickSight та Tableau.

Як наш Головний інженер даних, ваші повсякденні обов'язки будуть включати:

• Проектування, розробка та підтримка ефективних, вторинно використовуваних і надійних інфраструктур для обробки даних.