Oracle + PySpark Data Engineer (Remote)

Долучайтесь до нашої команди: інженер/аналітик даних Oracle + PySpark (віддалено) в PradeepIT Consulting Services Pvt Ltd

Опис вакансії:

Наразі ми шукаємо досвідченого інженера/аналітика даних Oracle + PySpark з професійним досвідом від 5 до 7 років. Ви станете важливою частиною нашої команди даних, де використовуватимете свої навички для управління, перетворення та аналізу великих наборів даних з метою здійснення складних процесів прийняття рішень. Це чудова можливість для професіоналів, котрі вміють підтримувати цілісність даних, оптимізувати потоки даних та створювати базові структури, орієнтовані на дані.

Основні обов'язки:

• Інтеграція даних: Виконувати інтеграцію різноманітних джерел даних в бази даних Oracle та створювати ефективні конвеєри даних PySpark для аналітики та перетворення.
• Перетворення даних: Розробляти, впроваджувати та обслуговувати динамічні робочі процеси PySpark для очищення, збагачення та організації даних, адаптованих для аналітичних досліджень.
• Моделювання даних: Створювати та постійно вдосконалювати моделі даних всередині Oracle для забезпечення оптимальної структурування та індексації для найкращої продуктивності запитів.
• Оптимізація запитів: Розробляти складні SQL-запити та скрипти PySpark, призначені для швидкого отримання даних та оптимізованої обробки.
• Аналіз даних: Тісно співпрацювати з аналітиками даних та бізнес-підрозділами для витягу інсайтів через надійний аналіз даних та всеосяжну звітність.
• Якість даних: Ініціювати впровадження суворих контролів якості, управління помилками та протоколів валідації, щоб гарантувати надійність та точність даних.
• Налаш