Інженер Big Data

Від імені нашого клієнта - активно розвиваючоїся компанії, що спеціалізується на розробці програмного забезпечення і працює в сфері Big Data Analytics, наразі ми шукаємо незалежного, кмітливого інженера Big Data, який виведе нашу команду розробників програмного забезпечення на нову висоту. Життя інженера Big Data протягом дня Його основне завдання - розкривати потенціал даних. Ви будете глибоко занурені в світ додатків Scala і Spark, де ви будете займатися розробкою, створенням та оптимізацією рішень для обробки величезних обсягів даних. Також на вас покладено відповідальність за розгортання та моніторинг цих додатків в умовах клієнтських середовищ, забезпечуючи їхню безперервну роботу. Для підтримки духу командної роботи ви також будете допомагати іншим командам у розробці та створенні додатків Spark. Ваші щоденні обов'язки включають: - Розробка алгоритмів аналізу в Spark - Використання Spark для трансформації та обробки мережевих даних - Оптимізація та тестування додатків Spark - Розгортання та моніторинг додатків в умовах клієнтського середовища - Допомога іншим командам у розробці та створенні додатків Spark. Вимоги: - Мінімум 3 роки досвіду роботи над розробкою додатків Spark у PySpark та/або Scala - Чудові вміння в розгортанні та моніторингу розподілених додатків - Солідний досвід роботи з Unix-системами - Глибокі знання Python - Знання рушіїв робочих процесів, наприклад, airflow - Відмінні навички командної роботи, спілкування та логічного мислення - Знання інструментів контролю версій - Вільне володіння англійською мовою усно та письмово Нам подобається ваш характер, якщо ви: - Поводитеся як власник - Насолоджуєтесь командною грою - Відчуваєте стартап-менталітет Переваги: Ви станете частиною команди, що пропонує не лише грошові винагороди, але і: - Усталене робоче середовище з відмінними перспективами - Підтримку колег, які є експертами у своїй галузі.