Senior, Data Engineer

Краткое описание должности: Присоединяйтесь к инновационной группе Walmart Advertising Technology, соединяющей бренды поставщиков с розничными покупателями в беспрецедентном масштабе. В составе нашей команды инженеров по обслуживанию дисплейной рекламы для серверных служб вы будете создавать омни-рекламные платформы будущего, направленные на повышение производительности и ценности. Эта практическая роль включает в себя управление основными компонентами нашего решения для дисплейной рекламы, координацию с другими командами и принятие ключевых архитектурных и технологических решений.

• Разработка конвейеров данных для объединения логов, создаваемых нашими различными серверными микросервисами.
• Расширение существующих конвейеров данных и интеграция новых источников данных для получения новых идей.
• Разработка проверок качества данных для выявления пробелов в данных и уведомления команд на верхнем уровне.
• Создание панелей мониторинга качества данных для контроля качества данных.
• Ведение проектов высокой видимости по всей организации.
• Наставничество и руководство инженерами среднего и младшего уровней.
• Демонстрация своего мастерства как исключительного и опытного программиста.

• Степень бакалавра/магистра в области компьютерных наук или смежной области.
• 5+ лет опыта в разработке технологий больших данных/конвейеров данных.
• Экспертиза в одном или нескольких языках программирования (Python, Java и т.д.).
• Умение управлять и манипулировать наборами данных терабайтного масштаба.
• Экспертные знания в технологиях больших данных, таких как Hadoop, Apache Spark, Apache Hive или аналогичных фреймворках.
• Сильные навыки интеграции данных из нескольких источников.
• Сильные навыки моделирования данных.
• Опыт работы с крупномасштабными базами данных.
• Способность очищать и трансформировать данные из различных источников.
• Умение оптимизировать запросы для улучшения производительности.
• Понимание принципов распределенных вычислений.
• Знания лучших практик в области безопасности данных и конфиденциальности.
• Сильные навыки решения проблем и устранения неполадок.
• Эффективные навыки общения и сотрудничества.
• Готовность постоянно учиться и адаптироваться к новым технологиям.

Технологии: HDFS, Spark/Hive, Kafka, Apache Parquet, Avro, GCS, GCP, BigQuery, Python.

Приветствуется: Предыдущий опыт работы в рекламной сфере.

Присоединяйтесь к команде, где одна строка кода может сделать жизнь проще для сотен миллионов людей. В составе Walmart Global Tech, вы будете работать рядом с инженерами-программистами, учеными в области данных, экспертами по кибербезопасности и сервисными профессионалами в рамках ведущего мирового розничного продавца. Здесь вы будете инновационными в масштабах, сможем повлиять на миллионы и переосмыслить будущее розничной торговли.

Мы применяем гибридный метод работы, который в основном происходит в офисе, дополняемый виртуальной работой, когда вы не находитесь на месте. Этот подход повышает сотрудничество, принятие решений и гибкость в нашей личной жизни.

Помимо конкурентного компенсационного пакета, вы можете зарабатывать премии на основе достижений. Среди льгот: соответствие 401(k), план покупки акций, оплачиваемый отпуск по беременности и уходу за ребенком, PTO и несколько медицинских планов и другие.

Работодатель равных возможностей: Walmart, Inc. является работодателем равных возможностей – по выбору. Мы ценим разнообразие и инклюзивность.

Примечание