Data Engineer

Опис компанії

AUTODO revised_small.jpgC - найбільша та швидкозростаюча електронна комерційна платформа автозапчастин в Європі. Присутня у 27 країнах з приблизно 5,000 співробітниками, AUTODOC згенерувала дохід понад €1.3 мільярда у 2023 році. Ми забезпечуємо понад 7.4 мільйона активних клієнтів 5.8 мільйонами деталей та аксесуарів для автомобілів, вантажівок та мотоциклів. Цікаві уми, авантюрні експерти та професіонали, які володіють технічними навичками—одна команда, один мільярд євро доходу. Приєднуйтесь до нас!

Опис посади

Як інженер з даних в проекті «Профіль користувача», вашою основною роллю буде організація збору та зберігання даних користувачів в одному централізованому місці. Це включає в себе створення класичних ETL процесів та роботу з даними у реальному часі, нереляційними базами даних та моделюванням даних.

• Збір даних з різних джерел (DB, Cloud, файли тощо)
• Створення потоків даних та ETL процесів
• Налаштування процесів потокової передачі даних майже у режимі реального часу
• Розробка дата-мартів
• Перевірка даних

Основні вимоги

• Високий рівень навичок програмування на Python
• Професійні знання SQL
• Практичний досвід роботи з Airflow
• Практичний досвід роботи з Kafka (Kafka Streams)
• Знання SnowFlake і DBT
• Досвід роботи з реляційними та нереляційними базами даних (переважно MySQL, MongoDB)
• Знання принципів зберігання даних (Data Lake, DWH)
• Практичний досвід роботи з графовими базами даних (переважно Neo4j)

Бажані вимоги

• Досвід роботи з GCP, Docker, Git
• Досвід роботи з Grafana або іншими інструментами моніторин