Старший инженер по данным

Мы верим в лучшее. И мы делаем это реальностью. Лучший контент. Лучшие продукты. И лучшие карьеры. Работа в области технологий, продуктов или данных в Sky - это создание нового и новаторского. От широкополосного доступа в интернет до телевизионного вещания, от стриминга до мобильных услуг, SkyQ до Sky Glass, мы никогда не стоим на месте. Мы оптимизируем и внедряем инновации. Мы воплощаем масштабные идеи в продукты, контент и услуги, которыми любят пользоваться миллионы людей. И мы делаем это прямо здесь, в Sky. Мы ищем инженера Big Data, который присоединится к нашей команде по борьбе с пиратством и будет отвечать за разработку и внедрение программных систем, а также расширение и оптимизацию нашей системы обработки данных, оптимизацию потока данных и сбор данных внутри команды по борьбе с пиратством. Большой инженер данных будет поддерживать наших разработчиков программного обеспечения, аналитиков данных и специалистов по науке о данных в инициативах, связанных с данными, и будет обеспечивать согласованность оптимальной архитектуры доставки данных в рамках текущих проектов. Что вам предстоит делать: Отвечает за разработку и внедрение программных систем Создание и поддержание оптимальной архитектуры системы обработки данных в облаке Создание данных продуктов и загрузка данных из GCS/GCP в BigQuery Сборка больших, сложных наборов данных, отвечающих требованиям команды AP. Идентификация, проектирование и внедрение улучшений внутренних процессов: автоматизация ручных процессов, оптимизация доставки данных, перепроектирование инфраструктуры для большей масштабируемости и т.д. Построение надежных систем, необходимых для оптимальной извлечения, преобразования и загрузки данных из широкого спектра источников данных для обработки данных Обеспечение безопасности наших данных на всех уровнях Работа с экспертами по данным и аналитики, чтобы добиваться большей функциональности в наших системах данных. Исследование различных новых методов получения данных и улучшения их качества. Что вы принесете: Построение процессов, поддерживающих преобразование данных, структуры данных, метаданные, зависимости и управление рабочей нагрузкой. Экспертные знания в области ETL и хранилищ данных Опыт работы с майнингом данных, моделированием данных и обработкой данных Успешный опыт манипулирования, обработки и извлечения ценности из больших, несвязанных наборов данных. Сильные организационные навыки. Опыт поддержки и работы с функциональными командами в динамичной среде. Опыт использования следующего программного обеспечения/инструментов: GCP, Tableau, Splunk Написание инструментов для извлечения и обработки данных из REST API. Практический опыт построения CI/CD Pipelines, Terraform или serverless & Git в качестве системы контроля версий. Технологии оркестрации данных, такие как Cloud Composer Airflow. Опыт работы с контейнерами, Kubernetes. Опыт работы со скриптовыми языками, такими как Python, Java, C++ и Scala, будет приятным бонусом. Краткий обзор команды: Group Data Hub Хотите раскрыть потенциал данных? Наш Group Data Hub работает с миллионами преобразований данных каждый день, чтобы предоставить ценность, улучшить опыт использования клиентами и обеспечить запуск новых продуктов. От архитектуры до аналитики и от инженерии до науки: это то, как мы предлагаем клиентам больше того, что они любят. Ваше рабочее место: Остерлей Наш кампус в Остерлее находится в 10 минутах ходьбы от железнодорожной станции Syon Lane. Или вы можете сесть на один из наших бесплатных автобусов-шаттлов, которые курсируют от и до Остерлей, Ганнерсбури, Илинг Бродвей и South Ealing станций метро. Также есть множество велопарковок и душевых. Также мы хотели бы услышать от вас Изобретательные, мыслящие вперед умы собираются вместе работать в области технологий, продуктов и данных в Sky. Это место, где вы можете исследовать, что если, как далеко, и что дальше. Но лучше не останавливается на том, что мы делаем, это то, как мы это делаем. Мы ценим различия друг друга. Мы поддерживаем наше сообщество и способствуем устойчивому будущему нашего бизнеса и планеты. Если вы верите в лучшее, мы поддержим вас в этом. Только чтобы вы знали: если ваша заявка будет успешной, мы попросим вас пройти проверку на наличие судимости. И в зависимости от роли, на которую вы подали заявку, и от характера возможных судимостей, мы можем быть вынуждены отказаться от предложения.