Data Engineer III

Название компании: Roswell Park Comprehensive Cancer Center

Должность: Инженер по данным III

Присоединяйтесь к нашей команде экспертов в области инженерии в Финансовой датафабрике в качестве Инженера по данным. Мы ищем квалифицированного специалиста для расширения, оптимизации и поддержки нашей архитектуры данных и конвейеров. Идеальный кандидат будет иметь опыт создания конвейеров данных и оптимизации систем данных.

Обратите внимание: Спонсорство на трудоустройство для этой должности не предусмотрено.

Что вы будете делать:

• Создание и поддержка оптимальной платформы данных и архитектуры конвейеров.
• Сбор больших, сложных наборов данных, соответствующих функциональным и нефункциональным бизнес-требованиям.
• Выявление, проектирование и внедрение внутренних улучшений процессов для автоматизации и оптимизации доставки данных.
• Создание инфраструктуры, необходимой для оптимальной экстракции, трансформации и загрузки данных из различных источников с использованием SQL и GCP технологий.
• Сотрудничество с заинтересованными сторонами, включая команды руководства, продуктов, данных и дизайна, для решения технических вопросов, связанных с данными, и поддержки потребностей инфраструктуры данных.
• Создание инструментов данных для членов аналитической команды, способствующих оптимизации нашего продукта.
• Партнёрство с специалистами по данным и аналитике для улучшения функциональности наших систем данных.

Что вы принесёте:

• Глубокие знания SQL и No-SQL баз данных.
• Опыт в создании и оптимизации конвейеров "больших данных", архитектур и наборов данных.
• Умение проводить анализ причинно-следственных связей во внутренних и внешних данных и процессах.
• Сильные аналитические навыки для работы с неструктурированными наборами данных.
• Опыт в трансформации данных, управлении метаданными, зависимостями и нагрузками.
• Опыт работы с системами очередей сообщений, потоковой обработки и масштабируемыми хранилищами "больших данных".
• Отличные навыки управления проектами и организованности.
• Сильные навыки сотрудничества в кросс-функциональных командах в динамичных условиях.

Мы ищем кандидатов с 3 до 6 лет опыта в роли Инженера по данным и степенью магистра в области компьютерных наук, статистики, информатики, информационных систем или другой количественной области. Обязателен опыт работы с следующими инструментами:

• Инструменты для "больших данных": Hadoop, Spark, Kafka.
• Реляционные SQL и NoSQL базы данных: Big Query, Cassandra.
• Инструменты управления конвейерами и рабочими процессами данных: Airflow.
• Облачные сервисы GCP: GCS, Dataproc, Dataplex.
• Системы потоковой обработки: Spark-Streaming, Storm.
• Объектно-ориентированные языки скриптов: Python, Scala.

В Walmart Global Tech мы создаем решения, которые улучшают жизнь миллионов людей. Наша команда состоит из программистов, специалистов по данным, экспертов по кибербезопасности и специалистов по обслуживания, работающих на переднем крае следующего прорыва в розничной торговле. Мы акцентируем внимание на среде, где люди являются движущей силой, а технологии – катализатором, предлагая возможности для роста и тренировок, соответствующие будущим навыкам.

Мы уделяем приоритетное внимание инклюзивным и доступным цифровым опытам и ценим знания стандарты Руководства по доступности веб-контента (WCAG) 2.2 AA и вспомогательных технологий. Наша цель – создавать доступные продукты и услуги, которые способствуют культуре инклю