Старший інженер з даних

Опис компанії

Ми шукаємо старшого інженера з даних, який очолить невелику команду під час перетворення нашої простої даних платформи на проект самообслуговування аналитики в хмарі.

КЛІЄНТ
Sigma Software надає послуги високоякісного програмного забезпечення, графічного дизайну, тестування і підтримки. Ми розробили системи, які дають вагомі переваги клієнтам в автомобільній, телекомунікаційній, авіаційній, рекламній, гральній, банківській, нерухомості та медичній галузях.

ПРОЕКТ
Для внутрішнього проекту в Sigma Software, наші основні цілі - це автоматизація звітності та створення системи самообслуговування аналітики даних для нашої компанії.

На цій посаді ви будете відповідати за проектування та моделювання даних в DWH та Data Marts за допомогою Spark та MS SQL. Ці дані будуть доступні, та ви будете тісно співпрацювати з інженерами BI, які створюють звіти за допомогою Apache Superset, серед інших, хто використовує такі дані. Ви також будете працювати з іншими членами команди, які залежать від цих даних. Крім того, частиною ваших обов'язків буде переведення нашого рішення на місці на хмарне оточення.

Опис роботи

• Ми прагнемо створити надійну систему для збору, обробки, аналізу та візуалізації великих обсягів даних з різних джерел.
• Створювати основу та моделювати дані
• Розробляти платформу для створення та керування каналами передачі даних, що збирають дані з різних джерел
• Створювати дата-склад
• Співпрацювати з бізнес-аналітиками для аналізу та підготовки описів доменів
• Створювати Data Marts
• Створювати модель доступу, яка дає можливість гнучкого контролю вертикального та горизонтального доступу до даних

Кваліфікація

• Розуміння основ аналітики даних, наприклад, розмірного моделювання, ETL/ELT, інструментів звітності, управління даними, дата-складу та структурованих та неструктурованих даних.
• Значний досвід роботи з SQL та досвід роботи з RDBMS, а також солідне розуміння основ бази даних.
• Досвід розробки баз даних та моделювання даних, бажано з Databricks/Spark
• Досвід роботи з Python
• Розуміння форматів серіалізації та їхніх компромісів (колоночні проти рядкових)
• Досвід ладнання та оптимізації роботи Spark
• Відмінні навички писемного та усного спілкування.
• Вільне володіння англійською мовою.
• Ступінь бакалавра в галузі комп'ютерних наук або суміжній галузі.
• Досвід роботи з інструментом бізнес-інтелекту буде плюсом.