Engenheiro de Dados Azure / Pyspark (Sênior)

Команда з аналізу й даних в Capgemini перебуває на передньому краї допомоги провідним компаніям в Бразилії покращувати свої бізнес-рішення шляхом трансформації великих даних у цінні потоки. Ми пишаємося нашим партнерством з цими клієнтами високого рівня, що забезпечується нашою командою виняткових особистостей. Якщо ви Сеніор Інженер з Даних, захоплені технологіями та інноваціями, у нас є ідеальна можливість для вас у Сан-Паулу, SP.

Це гібридна позиція з базуванням у Сан-Паулу, що передбачає 40-годинний робочий тиждень і модель контракту CLT.

• Проєктувати прості та ефективні технічні рішення, похідні з пріоритетних продуктових беклогів та стандартів якості.
• Оцінювати технічну та операційну можливість, аналізуючи визначення проблем, вимоги та рішення.
• Забезпечувати якість продукту через практики гнучкої розробки, такі як рефакторинг, перегляд коду, чистий код, безперервна інтеграція, розгортання та тестування.
• Вирішувати проблеми шляхом відладки та оновлення існуючого програмного забезпечення.
• Проводити необхідне тестування для забезпечення якості продукту.
• Надавати рекомендації щодо постійного вдосконалення, послідовно застосовуючи кращі практики.

• Досвід роботи з Azure Data Factory та Azure Databricks.
• Кваліфікація у обробці даних пакетно та в реальному часі.
• Міцний досвід у Pyspark і Python, а також знайомство з Kedro.
• Досвід роботи в локальних середовищах (Cloudera).
• Вміння в PL/SQL базах даних (запити та створення запитів).
• Досвід роботи з інструментами оркестрації (наприклад, Control-M).
• Кваліфікація у використанні Git та гарне розуміння принципів DevOps.
• Знайомство з гнучкими методологіями та м