Senior Data Engineer, Databricks

Відкрита вакансія старшого інженера з даних у Databricks - Srijan Technologies, Гурґаон

У компанії Material ми перетворюємо виклики клієнтів на значні можливості для зростання. Працюючи на глобальному рівні, Material та її компанії, такі як Srijan, є визнаними партнерами провідних світових брендів, допомагаючи у проєктуванні та реалізації прибуткового досвіду споживачів через глибокі людські усвідомлення та сучасні технології. Приєднуйтесь до нас та станьте частиною надзвичайної команди, яка прагне робити різницю.

Як старший інженер з даних у Srijan Technologies у Гурґаоні, ви приєднаєтесь до нашої адаптивної продуктової команди як кваліфікований член, завданням якого є проєктування, будівництво та підтримка сучасних потоків даних. Використовуючи інструменти на кшталт Databricks, SQL та Python, ви будете тісно співпрацювати з науковцями в області даних, розробниками та зацікавленими сторонами, щоб забезпечити надійність наших рішень для даних, які відповідають бізнес-цілям.

- Розробка та реалізація ефективних рішень ETL/ELT, які включають екстракцію даних, їх перетворення та інтеграцію.
- Розробка пакетних каналів введення і підтримка інтегральності та якості даних.
- Створення складних SQL-запитів та оптимізація продуктивності через налаштування.
- Використання Python для автоматизації завдань та юніт-тестування за допомогою фреймворків, таких як Nutter, Unittest, Pytest.
- Забезпечення контролю версій за допомогою систем на кшталт Git та підтримка процесів CI/CD.

- Доведений досвід роботи з технологіями великих даних, включно з Apache Spark™, Cloud Native, Data Lakes та Databricks.
- Міцний досвід у моделюванні даних, створенні сховищ і інтеграції.
- Відмінні навички вирішення проблем, документування та ком