Data Engineering Senior Supervisor

Размер и масштаб Cargill позволяют нам оказывать значительное положительное влияние по всему миру. Наша миссия - безопасно, ответственно и устойчиво кормить планету. Как семейная компания, мы предоставляем основные продукты питания, ингредиенты, сельскохозяйственные решения и промышленные товары, необходимые для повседневной жизни. Мы устраняем разрыв между фермерами и рынками, помогая им процветать, и соединяем клиентов с ингредиентами, которые создают любимые блюда. Кроме того, мы обеспечиваем семьи повседневными необходимыми продуктами – от яиц до пищевых масел, от соли до средств по уходу за кожей и от кормов до альтернативных видов топлива. С 160 000 коллег в 70 странах наши важнейшие продукты касаются миллиардов жизней ежедневно. Присоединяйтесь к Cargill и осуществите свое высшее предназначение.

В роли старшего руководителя группы инженеров данных вы будете руководить командой профессионалов в области инженерии данных для проектирования, создания и эксплуатации высокопроизводительных продуктов или решений, ориентированных на данные, с использованием современных инженерных практик и технологий. Ваша роль крайне важна для обеспечения масштабируемости, устойчивости и надежности предоставляемых продуктов или решений. Вы также будете руководить развитием команды и способствовать налаживанию межкомандных отношений для продвижения инженерных достижений Cargill.

• Руководить местной или региональной командой при проектировании, разработке, развертывании и улучшении продуктов или решений, ориентированных на данные, с использованием современных платформ и технологий.
• Осуществлять регулярный анализ бизнес-требований, подготовку технической спецификации, доставку продукта, тестирование и эксплуатацию в поддержку стратегического направления компании.
• Обучать инженеров, делиться релевантными техническими подходами, выявлять появляющиеся тенденции, навыки и представлять новые методологии в сообществе инженеров данных.
• Руководить и развивать команду, принимать решения, связанные с управлением талантами, наемом, производительностью и дисциплинарными действиями.
• Выполнять другие порученные задачи.

Минимальные требования

• Степень бакалавра в смежной области или эквивалентный опыт.
• Минимум четыре года опыта работы в смежной области.
• Минимум два года опыта руководства командой инженеров данных.

Предпочтительные квалификации

• Подтвержденный опыт работы в инженерии данных с хранением и управлением большими, гетерогенными наборами данных, включая форматы, структуры и каталогизацию с использованием инструментов, таких как Iceberg, Parquet, Avro, ORC, S3, HFDS, HIVE, Kudu или других.
• Опыт руководства командами по работе с большими данными в средах, таких как Hadoop и Spark.
• Опыт работы со стратегиями облачных платформ, включая AWS, GCP, или Azure.
• Опыт работы с платформами потоковой передачи и интеграции потоков или промежуточными платформами, инструментами и архитектурами, такими как Kafka, Flink, JMS или Kinesis.
• Подтвержденное знание лучших практик для современных архитектур данных, включающих data warehouses, data lakes, data mesh, хабы и связанные с ними возможности.
• Опыт работы с инструментами трансформации и моделирования, включая фреймворки для трансформаций на основе SQL, оркестрации и фреймворков контроля качества, таких как dbt, Apache Nifi, Talend, AWS Glue, Airflow, Dagster, Great Expectations, Oozie и других.
• Сильные навыки программирования на SQL, Python, R, Java, Scala или эквивалентных языках.
• Умение работать с инженерными инструментами, включая Docker, Git и сервисы оркестрации контейнеров.
• Опыт руководства DevOps-командами с демонстрацией понимания лучших практик управления кодом, стратегий непрерывной интеграции и раз