Senior Data Engineer

Возможность: Работая старшим инженером по данным в CREATEQ, вы получите уникальную возможность формировать и развивать возможности наших систем обработки данных в реальном времени. Тесно сотрудничайте с заинтересованными сторонами для расширения разнообразия и точности расчетов таргетинга для конкретного пользователя, выполняемых в реальном времени.

Чем вы будете заниматься:

• Разработка инновационных функций для наших собственных потоковых баз данных ключ/значение.
• Повышение эффективности ресурсов на всех этапах нашего конвейера данных — от валидации и приема до хранения и динамического запроса.
• Сотрудничество с разработчиками и заинтересованными сторонами для архитектуры сервисов, отвечающих бизнес- и продуктовым требованиям.

Требования:

• Знание языков программирования, таких как Go, C++ или аналогичных.
• Обширный опыт работы с Kafka как с системой обработки данных.
• Экспертные знания в управлении распределенными, основанными на событиях системами с акцентом на обработку в реальном времени и наблюдение.
• Опыт управления системами данных с высокой размерностью и высокой кардинальностью — от моделирования сущностей до оптимизации запросов.
• Полное понимание всего жизненного цикла разработки — от идеи функций до развертывания и дальнейшей поддержки.

Технологический стек: Наша инфраструктура включает в себя Spark и HDFS на Cloudera, Java 11+, Go сервисы на Kubernetes на собственном оборудовании, protobuf и gRPC, Kafka 3, LSM-базы данных ключ/значение, такие как RocksDB, и реляционные хранилища, ориентированные на OLAP, такие как ClickHouse.

Преимущества:

• Присоединяйтесь к непринужденной, но профессиональной обстановке, где приветствуются проба и ошибка.
• Получите полное владение своим кодом при поддержке опытных технических лидеров.
• Конкурентоспособная зарплата, соответствующая вашим навыкам и опыту.
• Широкий спектр льгот, включая частную пенсию, медицинскую страховку, оплачиваемый отпуск по беременности и родам и больничный.
• Участие в различных спортивных клубах и щедрые реферальные сборы.
• Истинный баланс между работой и личной жизнью с гибкими условиями работы — удаленно или в офисе.

О CREATEQ: В CREATEQ мы стремимся предоставить