AWS Data Engineer

Приєднуйтесь до нашої команди як інженер з даних AWS в NearSource Technologies - віддалена позиція в Канаді

NearSource Technologies з захопленням запрошує подавати заявки на роль інженера з даних AWS. Це чудова можливість для професіоналів, які шукають повноцінну, повністю віддалену позицію, з вимогою, що кандидати мають проживати в межах Канади.

Як інженер з даних AWS, ви будете ключовою особою у керуванні нашими системами великих даних, внесенні до наших робочих процесів обробки даних та покращенні наших стратегій управління базами даних. Від вас очікується значний досвід у цій сфері, разом із сильними аналітичними навичками та вмінням програмування.

• Розроблення та підтримання надійних фреймворків даних із використанням Spark data frames, Spark SQL та PySpark.
• Написання чистого, модульного та піддатливого до супроводжування коду, переважно на Python & SQL.
• Використання SQL для дименсійного моделювання та роботи з великими дата-варегаузами, такими як Hive та Snowflake.
• Управління робочими процесами ETL із використанням інструментів на кшталт Airflow для забезпечення безперебійної інтеграції та обробки даних.

• Мінімум 5 років відповідного досвіду роботи з системами великих даних та обробкою даних.
• Щонайменше 2 роки практичного досвіду кодування в Spark data frames, Spark SQL та PySpark.
• Продвинуті навички програмування на Python & SQL з добрим розумінням практик розробки програмного забезпечення.
• Знайомство з аналітичними великими дата-варегаузами та інструментами управління робочими процесами ETL.

• Володіння інструментами контролю версій та CI/CD, такими як Git та Jenkins CI.
• Досвід роботи з рішеннями для нотаток, такими як Jupyter, EMR Notebooks, Apache Zeppelin.
• Сильні здібності до вирішення проблем з відмінними навичками письмового та між