Керівник відділу інженерії даних

Наша мета Ми намагаємося з'єднати та зарядити включною, цифровою економікою, яка вигода всім, усюди, роблячи транзакції безпечними, прямолінійними, розумними та доступними. Використовуючи захищені дані та мережі, партнерства та пристрасть, наші інновації та рішення допомагають окремим особам, фінансовим установам, урядам та бізнесу реалізувати свої максимальні потенціали. Наш децент квотиент, чи DQ, підтримує нашу культуру та все, що ми робимо всередині та поза нашою компанією. Ми підтримуємо культуру включення для всіх співробітників, яка визнає їх унікальні сили, погляди та досвід. Ми віримо, що наші розбіжності дозволяють нам створити кращу команду - команду, яка приймає кращі рішення, сприяє інноваціям та досягає кращих бізнес-результатів. Назва та резюме Головний інженер з даних Хто такий Mastercard? Mastercard - це глобальна технологічна компанія в галузі платежів. Наша місія - з'єднати та живити включну, цифрову економіку, яка приносить користь всім, усюди, роблячи транзакції безпечними, простими, розумними та доступними. Використовуючи захищені дані та мережі, партнерства та пристрасть, наші інновації та рішення допомагають окремим особам, фінансовим установам, урядам та бізнесу реалізувати їх найбільший потенціал. Наш децент квотиент, або DQ, керує нашою культурою та все, що ми робимо в межах і за межами нашої компанії. Оперуючи в понад 210 країнах та територіях, ми будуємо сталу світ, який відкриває неймовірні можливості для всіх. Огляд Команда Data Warehouse шукає інженера-водія великих даних для підтримки нашої місії використовувати потенціал данних, постійно генеруючи нові ідеї, полегшуючи доступ користувачів до великих даних та дотримуючись стандартів і принципів в області великих даних. Дана роль відповідальна за розробку та підтримку архітектури даних, а також пов'язані процеси обслуговування, інтеграції та завантаження даних для організації. Склад даних Hadoop використовується різними групами для видобутку ідей, проведення машинного навчання та наукових досліджень, що, у свою чергу, підтримують численні ініціативи щодо генерації прибутку в усій організації. Роль • Розробка високоякісних, безпечних та масштабованих каналів передачі даних за допомогою Spark, Scala / Python / Java на Hadoop або об'єктному зберіганні. • Виконання провідної консультативної ролі в складних ініціативах стратегічного значення (наприклад, міжфункціональних/міжгеографічних), включаючи застосування найбільш відповідних рішень для окремих застосунків. • Розробка та архітектура шаблонів потоку даних в середовищі Hadoop, які можуть бути масштабованими, повторюваними та усувати трудомісткі кроки. • Заохочення автоматизації та ефективності в процесах введення даних, переходу даних та доступу до даних за допомогою інновацій та співпраці. • Розуміння, впровадження та дотримання стандартів розробки програмного забезпечення та принципів інженерії в області великих даних. • Тісне співпраця з бізнес-зацікавленими сторонами та вбудованими інженерними командами в межах бізнес-команд для співпраці та допомоги їм у створенні продуктів. • Використання нових технологій та підходів для інновацій в інтересах працювання з все більшими наборами даних. • Співпраця з проектною командою для виконання запланованих термінів, виявлення виникаючих проблем та рекомендацій щодо рішень проблем. • Самостійне виконання призначених завдань та вирішення виробничих інцидентів. • Внесення пропозицій, щоб забезпечити виконання необхідних стандартів і процесів, а також активно шукаються можливості для вдосконалення стандартів та ефективності процесів. Все про Вас • 10-16 років досвіду роботи над проектами, пов'язаними з складами даних, в організації товарів або послуг. • Володіння інженерією даних та впровадженням кількох проектів DW в середовищі великих даних Hadoop. • Досвід створення трубопроводів даних за допомогою Spark з Scala/Python/Java на Hadoop або об'єктному зберіганні. • Досвід роботи з базами даних, такими як Oracle, Netezza із сильними знаннями SQL. • Досвід роботи над системами реального часу, NiFi та Kafka буде додатковою перевагою. • Досвід роботи над автоматизацією в процесі потоку даних у середовищі великих даних. • Досвід роботи в командах Agile. • Потужні аналітичні навички, необхідні для відлагодження виробничих проблем, проведення аналізу причин і реалізації плану пом'якшення. • Сильні комунікативні навички - як усні, так і письмові - а також сильні взаємовідносини, співпраця та організаційні навички. • Здатність до мультизадачності у кількох проектах, зв'язок з зовнішніми/внутрішніми ресурсами і надання технічного керівництва молодшим членам команди. • Висока енергія, увага до деталей, проста активність, здатність до роботи в умовах тиску у незалежному оточенні разом із високим рівнем ініціативи та самомотивації для досягнення результатів. • Здатність швидко вчити та впроваджувати нові технології та виконувати POC для дослідження кращого рішення для проблемного заявлення. • Гнучкість працювати як член розмаїтої та географічно розосередженої проектної команди, що базується на матриці. • Успішне керівництво в складних міжфункціональних ініціативах, очікує встановлення напрямків проекту та вирішення/ліквідацію бутляг. • Досвід участі в значному зусиллі щодо автоматизації та/або доставки в хмарі, включаючи фінансове прийняття рішень. • Досвід керування зобов'язаннями в глобальних технологічних доменах та піддоменах бази даних, очікує командування лідерами в технічній спільноті та висування нових рішень. • Перевірена здатність діяти як експертоварищ і довірена особа з питань модернізації інфраструктури великих даних та бізнес-стратегій для хмари та на власній території. Корпоративна безпека Всі діяльності, що включає доступ до активів Mastercard, інформації та мереж представляють втривану ризик для організації, і тому очікується, що всі, хто працює на Mastercard або від імені компанії, відповідають за безпеку інформації та повинні: • Дотримуватися політик безпеки Mastercard та їх практики. • Забезпечувати конфіденційність та цілісність доступної інформації. • Повідомляти про будь-які підозрілі порушення або витоки інформаційної безпеки. • Проходити всі періодичні обов'язкові тренувальні заходи з безпеки відповідно до вимог Mastercard.