Azure Databricks Engineer

Рівень досвіду: 5-7 років

Компанія: PradeepIT Consulting Services Pvt Ltd

PradeepIT Consulting Services Pvt Ltd шукає талановитого та досвідченого Старшого Інженера Даних, щоб приєднатися до нашої інноваційної команди. Успішний кандидат повинен мати міцний набір навичок у галузі інженерії даних, включаючи експертизу в Azure Databricks, Pyspark, Medallion Architecture та Data Lakes.

Обов'язки

• Проектування, розробка та оптимізація конвеєрів даних за допомогою Azure Databricks та Pyspark.
• Впровадження та підтримка Medallion Architecture для оптимізації робочих процесів обробки даних.
• Управління та організація великих наборів даних у Data Lakes, забезпечення якості та цілісності даних.
• Написання складних SQL-запитів для вилучення, перетворення та завантаження даних з різних джерел.
• Співпраця з науковцями даних, аналітиками та іншими зацікавленими сторонами для розуміння потреб у даних та надання ефективних рішень.
• Моніторинг та усунення проблем продуктивності конвеєрів даних, вирішення виникаючих проблем.
• Залишатися в курсі останніх досягнень у галузі інженерії даних та пропонувати інноваційні рішення для покращення процесів обробки даних.

Вимоги

• 5-7 років практичного досвіду роботи у галузі інженерії даних або суміжній області.
• Висока кваліфікація у Azure Databricks та Pyspark.
• Глибоке розуміння Medallion Architecture та її впровадження.
• Досвід роботи з Data Lakes і управління великими наборами даних.
• Високий рівень навичок у SQL з можливістю написання та оптимізації складних запитів.
• Знання Azure-сервісів та хмарних рішень для роботи з даними.
• Сильні навички вирішення проблем та увага до деталей.
• Відмінні навички спілкування та співпраці.

Чому варто приєднатися до нас?

У PradeepIT Consulting Services Pvt Ltd ми прагнемо використовувати силу даних для розробки інноваційних рішень. Якщо ви захоплюєтеся роботою з великими наборами даних і насолоджуєтеся розробкою передових рішень, ми закликаємо вас подати заявку на цю захоплюючу можливість.

Зацікавлені кандидати, будь ласка, надішліть свою заявку з детальним резюме. Ми з нетерпінням чекаємо на нового члена нашої команди!