Старший инженер по данным - Azure (ADF, Data Lake)

Группа родственных профессий: Информационные технологии (IT), исследования и разработка Тип работника: Постоянный Дата начала публикации: Бизнес-единица: Уровень опыта: Опытные специалисты Описание работы: Присоединяйтесь к лидеру мирового рынка смазочных материалов и станьте частью команды, которая формирует цифровую и IDT стратегию, радующую наших клиентов более чем в 100 странах по всему миру и по всем секторам. Если вы ищете место, где можно накопить практический опыт и оказать прямое воздействие, то это место для вас! Где вы будете работать Бизнес-единица Projects and Technology (P&T) компании Shell существует для реализации наших стратегий и роста нашей компании. Наша команда разрабатывает продвинутые продукты и технологии, которые Shell нужны для удовлетворения спроса клиентов. Наши решения помогают нашим партнерам развивать бизнес в области СПГ, газа и энергетики, углубляют интеграцию производства, химического и торгового бизнеса, а также повышают конкурентоспособность нашего бизнеса по добыче нефти. Какова ваша роль? На должности инженера по данным в Shell вы будете создавать и поддерживать оптимальную архитектуру конвейера данных, а также собирать большие и сложные наборы данных, которые соответствуют функциональным и нефункциональным бизнес-требованиям. Вы также будете идентифицировать, проектировать и внедрять внутренние процессы улучшения: автоматизацию ручных процессов, оптимизацию доставки данных, перепроектирование инфраструктуры с целью увеличения масштабируемости и т.д. Работайте со стейкхолдерами, включая команды исполнительного руководства, продуктов, данных и дизайна, чтобы помочь им решать технические проблемы, связанные с данными, и поддерживать их потребности в инфраструктуре данных. Более конкретно, ваша роль будет включать: Построение инфраструктуры, необходимой для оптимального ETL/ELT данных из широкого спектра источников данных с использованием SQL и технологий "больших данных" Azure, AWS. Создание аналитических инструментов, которые используют конвейер данных для предоставления действенных данных о привлечении клиентов, оперативной эффективности и других KPI. Поддержание наших данных разделенными и защищенными по национальным границам с помощью нескольких центров обработки данных и регионов Azure, AWS. Создание инструментов для аналитиков и ученых-данных, которые помогают им создавать и оптимизировать наш продукт, превращая его в инновационного лидера отрасли. Работайте с экспертами по данным и аналитикам, чтобы добиться большей функциональности наших систем данных. Что нам нужно от вас Мы регулярно нанимаем специалистов с 8-летним стажем работы на должности инженера по данным, которые получили степень магистра и занимали хотя бы старшую должность на своем предыдущем месте работы. Они должны иметь опыт работы с следующим программным обеспечением/инструментами: Опыт работы с Azure: ADF, ADLS, Databricks, PySpark, Spark SQL, Stream Analytics, SQL DW, COSMOS DB, Analysis Services, Azure Functions, Serverless Architecture, ARM Templates. Опыт работы с реляционными SQL/NoSQL базами данных, обработкой файлов и интеграцией API Опыт работы с объектно-ориентированными/функциональными языками программирования: Python, SQL, Scala, Spark-SQL и т.д. Предпочтение имеют кандидаты с опытом работы с любым из этих наборов инструментов, таких как Kafka, Stream sets, Alteryx, HANA, SLT и BODS Навыки – предпочтительно иметь: Продвинутые знания SQL и опыт работы с реляционными базами данных, написание запросов (SQL), а также знакомство с различными базами данных. Опыт создания и оптимизации конвейеров данных с использованием ADF Опыт проведения анализа причин и следствий для внутренних и внешних данных и процессов для ответа на конкретные бизнес-вопросы и определения возможностей для улучшения Сильные аналитические навыки, связанные с работой со структурированными и неструктурированными наборами данных Создание процессов, поддерживающих преобразование данных, структуры данных, метаданные, зависимости и управление нагрузкой. Успешный опыт преобразования, обработки и извлечения ценности из больших несвязанных наборов данных Сильные командные качества, организационные и коммуникативные навыки Опыт поддержки и работы с межфункциональными командами в динамичной среде Что вам это даст? Инновационное место работы Еще никогда работать в Shell не было так интересно. Каждый из нас здесь помогает решить одну из самых больших проблем, с которыми сталкивается мир сегодня: предоставление всех благ энергии каждому на планете, при этом контролируя риски изменения климата. Присоединяйтесь к нам, и вы добавите свой талант и фантазию к бизнесу с возможностью формировать будущее - будь то инвестиции в возобновляемую энергию, исследование новых способов хранения энергии или разработка технологии, которая помогает миру эффективнее использовать энергию. Инклюзивное место работы Чтобы совместно двигаться вперед, нам нужно привлекать и развивать самые яркие умы и убедиться, что каждый голос слышен. Вот лишь некоторые из способов, которыми мы содействуем формированию инклюзивной среды - среды, где вы можете выразить свои идеи, расширить свои навыки и реализовать свой потенциал. Мы стремимся создать пространство, где люди с инвалидностью могут преуспеть благодаря прозрачному процессу найма, корректировкам на рабочем месте и постоянной поддержке в их роли. Не стесняйтесь сообщить нам о своих обстоятельствах, когда подаете заявку, и мы сами разберемся. Мы сокращаем гендерный разрыв - будь то с помощью действий по обеспечению равенства заработной платы или путем предоставления большему числу женщин возможности занять старшие должности в инженерии и технологии. Мы стремимся стать пионером включительной и разнообразной рабочей среды, где каждый сотрудник равен перед законом, независимо от его сексуальной ориентации или гендерной идентичности. Мы считаем себя гибким работодателем и хотим помочь вам найти правильный баланс. Мы приглашаем вас обсудить это с нами при подаче заявки. Вознаграждение за работу Сочетание нашего творческого, сотрудничающего окружения и глобальных операций с впечатляющим набором льгот делает присоединение к Shell вдохновенным выбором карьеры. Мы являемся большими сторонниками карьерного развития. Мы будем поощрять вас пробовать новые роли и сталкиваться с новыми обстоятельствами. Настаивая на том, чтобы люди стремились к своему потенциалу, мы часто помогаем им обнаружить навыки, о которых они и не подозревали, или делаем карьерные шаги, о которых они даже не мечтали. ОТКАЗ ОТ ОТВЕТСТВЕННОСТИ: Пожалуйста, обратите внимание: мы иногда вносим изменения или удаляем вакансии Shell и оставляем за собой право это сделать в любое время, включая время до указанной даты закрытия. Перед подачей заявки вам рекомендуется прочитать нашу политику защиты данных. В этой политике описывается обработка, которая может быть связана с вашими личными данными, и информирует вас о том, что ваши личные данные могут быть перенесены в компании Shell/Shell Group по всему миру. Группа Shell и ее утвержденные консультанты по найму никогда не попросят у вас плату за рассмотрение или обработку вашей заявки на работу в Shell. Кто бы ни требовал такую плату, тот не является уполномоченным представителем Shell, и вам настоятельно рекомендуется отказаться от любого такого требования. Shell является работодателем, предлагающим равные возможности.