Senior Data Engineer

Можливість: Обіймаючи посаду старшого інженера з даних у CREATEQ, у вас буде унікальна можливість формувати та розвивати можливості наших систем обробки даних у реальному часі. Тісно співпрацювати із зацікавленими сторонами для розширення різноманітності та точності розрахунків цільових показників для клієнтів, що виконуються в реальному часі.

Що ви будете робити:

• Розробляти інноваційні функції для наших авторських потокових баз даних ключ/значення.
• Поліпшувати ефективність ресурсів на всіх етапах нашої системи обробки даних — від валідації та збору до зберігання та динамічного запитування.
• Співпрацювати з розробниками та зацікавленими сторонами для проектування сервісів, які задовольняють ділові та продуктові потреби.

Вимоги:

• Володіння мовами програмування, такими як Go, C++ або схожими.
• Глибокий досвід роботи з Kafka як системою обробки даних.
• Експертне розуміння розподілених, орієнтованих на події систем з акцентом на обробку даних у реальному часі та спостережливість.
• Досвід управління системами даних з високою вимірністю та високою кардинальністю — від моделювання сутностей до оптимізації запитів.
• Всебічні знання на всьому життєвому циклі розробки — від ідеї функцій до розгортання та далі.

Технічний стек: Наша інфраструктура включає Spark і HDFS на Cloudera, Java 11+, сервіси Go на локальних Kubernetes, protobuf і gRPC, Kafka 3, бази даних ключ/значення на основі LSM, як RocksDB, та OLAP-орієнтовані реляційні бази даних, як ClickHouse.

Переваги:

• Приєднайтесь до неформального, але професійного середовища, де підтримується проб і помилок.
• Беріть повну відповідальність за свій код із підтримкою досвідчених технічних лідерів.
• Конкурентосп