(USA) Data Engineer III

Вакансия: Инженер по данным III в Walmart Global Tech

Мы ищем опытного инженера по данным, чтобы присоединиться к нашему расширяющемуся коллективу профессионалов в области инженерии в Финансовой фабрике данных Walmart Global Tech. Эта роль важна для расширения и оптимизации нашей архитектуры данных и каналов передачи данных, улучшения потока данных и обеспечения бесперебойного сбора данных для межфункциональных команд.

Примечание: Спонсорство для трудоустройства не доступно для этой позиции.

• Создание и поддержка оптимальной платформы данных и архитектуры каналов передачи данных.
• Сбор больших, сложных наборов данных, которые соответствуют функциональным и нефункциональным бизнес-требованиям.
• Идентификация, проектирование и реализация внутренних улучшений процессов, таких как автоматизация ручных процессов и оптимизация доставки данных.
• Создание инфраструктуры для оптимальной экстракции, трансформации и загрузки (ETL) данных из различных источников с использованием SQL и технологий больших данных GCP.
• Сотрудничество с заинтересованными сторонами, включая руководство, продуктовые, аналитические и дизайнерские команды, для поддержки потребностей в инфраструктуре данных.
• Разработка инструментов данных для аналитической команды для помощи в создании и оптимизации нашего продукта для достижения лидерства в отрасли.
• Тесное сотрудничество с экспертами по данным и аналитике для улучшения функциональности наших систем данных.

• Продвинутые знания работы с SQL и NoSQL базами данных.
• Опыт создания и оптимизации каналов передачи больших данных, архитектуры и наборов данных.
• Опыт проведения анализа причинных связей внутренних и внешних данных и процессов.
• Сильные аналитические навыки при работе с неструктурированными наборами данных.
• Способность разрабатывать процессы, поддерживающие трансформацию данных, структуру данных, метаданные, управление зависимостями и рабочей нагрузкой.
• Опыт манипулирования, обработки и извлечения ценности из больших наборов данных.
• Знание работы с очередями сообщений, потоковой обработкой и масштабируемыми хранилищами больших данных.
• Сильные навыки управления проектами и организационные навыки.
• Опыт поддержки и работы с межфункциональными командами.
• Минимум 3-6 лет опыта работы в роли инженера данных.
• Степень магистра в области компьютерных наук, статистики, информатики, информационных систем или другой количественной области.
• Опыт работы с инструментами, такими как Hadoop, Spark, Kafka и реляционные базы данных SQL и NoSQL, включая Big Query и Cassandra.
• Опыт работы с инструментами управления каналами данных и рабочими процессами, такими как Airflow.
• Опыт работы с облачными сервисами GCP, такими как GCS, Dataproc, Dataplex и системами потоковой обработки, такими как Spark-Streaming и Storm.
• Знание объектно-ориентированных и скриптовых языков, таких как Python, Scala.

Представьте, что вы работаете в среде, где одна строка кода может облегчить жизнь сотням миллионов людей. Именно этим мы занимаемся в Walmart Global Tech. Мы - команда программистов, ученых в области данных, экспертов по кибербезопасности и сервисных специалистов в крупнейшем мировом ритейлере. Мы на передовой следующего розничного прорыва, движимы людьми и технологиями. Присоединяйтесь к нам, чтобы развивать свою карьеру и делать разницу.

Наша гибридная модель работы поощряет сотрудничество, быструю принятие решений и гибкость. Она сочетает работу на месте с виртуальными опциями, соответствующими нашим личным и профессиональным потребностям.

В Walmart мы предлагаем конкурентоспособную оплату труда, бонусы на основе производ