Data Engineer

Опис вакансії

DXC Technology шукає кваліфікованого Інженера з даних. Ідеальний кандидат розроблятиме, впроваджуватиме й тестуватиме програми та скрипти для автоматизації завдань і обробки даних, використовуючи SQL для оперативного використання. Обов'язки включають виконання аналізу даних, управління та моніторинг безпеки даних, а також документування процедур і кращих практик.

• Оптимізація та покращення продуктивності обробки даних шляхом виявлення та усунення проблем з продуктивністю.
• Розробка, впровадження та тестування скриптів і програм на Python для автоматизації завдань обробки даних та аналізу.
• Використання складного SQL для вилучення, маніпуляції, трансформації, завантаження даних і оптимізації продуктивності та ефективності.
• Проектування, моделювання та оптимізація моделей даних і структур даних для ефективного звітування, аналізу, візуалізації даних і обміну даними.
• Співпраця з командами бізнес-інтелекту, додатків і консультантів для задоволення потреб клієнтів у даних і подолання викликів.
• Виконання аналізу даних та профайлінгу для виявлення питань якості даних, аномалій та можливостей для покращення.
• Участь у управлінні та моніторингу безпеки даних та аномалій доступу.
• Документування та оновлення процедур і кращих практик, пов'язаних з Python, бібліотеками, алгоритмами та іншими технологіями обробки даних. Пропонування інноваційних рішень.

• Мінімум 3 роки досвіду роботи в інженерії даних.
• Досвід роботи з хмарними обчислювальними платформами, такими як AWS, Azure або GCP.
• Вміння розробки інтеграції даних (ETL/ELT) за допомогою Python, PySpark та SparkSQL.
• Досвід роботи з технологіями баз даних, такими як Redshift, Snowflake або BigQuery. <