Data Engineer I - Data Engineering

Члены нашей команды – это сердце всего, что мы делаем. В Cencora мы объединены ответственностью за создание более здорового будущего, и каждый человек здесь является важным для реализации этой цели. Если вы хотите изменить мир в центре здоровья, присоединяйтесь к нашей инновационной компании и помогите нам улучшить жизнь людей и животных по всему миру. Подайте заявку сегодня!

Основные обязанности и задачи:

• Работайте с заинтересованными сторонами бизнеса для выявления деловых проблем, возможностей и инициатив, для которых аналитические модели могут предоставить идеи, способствующие разработке решений.
• Концептуализируйте, проектируйте и разрабатывайте аналитические модели для решения сложных деловых проблем, открытия новых идей и выявления возможностей, используя гипотетический подход.
• Переводите данные в информацию и инсайты с четким анализом сценариев, влиянием на бизнес и планами выполнения для достижения эффекта.
• Сотрудничайте с членами команды для включения точных и релевантных данных в модели машинного обучения, идентификации потенциальных источников прокси-данных и разработки бизнес-аналитических решений с учетом будущих потребностей, инфраструктуры и требований безопасности.
• Проводите анализ данных и разрабатывайте сложные аналитические алгоритмы.
• Моделируйте и формализуйте бизнес-сценарии, которые влияют на критические бизнес-процессы и решения.
• Сотрудничайте с экспертами по предметной области для выбора релевантных источников информации, перевода бизнес-требований к семантическому доступу, концептуальным, логическим и физическим моделям данных.
• Выполняйте профилирование данных и превентивные процедуры для улучшения качества данных; используйте технологии для извлечения и анализа необработанных данных.
• Определяйте возможности и поддерживайте разработку автоматизированных решений для повышения качества корпоративных данных.
• Программируйте, тестируйте, отлаживайте и документируйте сложные программы, а также улучшайте существующие программы, чтобы системы обработки данных соответствовали требованиям пользователей.
• Разрабатывайте спецификации для клиентских и пользовательских отчетов, включая исключения сетевых данных, особые обстоятельства и кастомизированные элементы данных.
• Идентифицируйте сложные области для решения новых технических проблем и предоставляйте инновационные технические решения в области наук о данных и машинного обучения.

Обязанности:

• Проектировать, разрабатывать, тестировать, развертывать и поддерживать системы обработки данных.
• Строить масштабируемые конвейеры данных с использованием Azure Data Factory для извлечения, преобразования и загрузки структурированных и неструктурированных данных.
• Реализовывать безопасное хранение и контроль доступа к конфиденциальным данным с использованием Azure Key Vaults.
• Использовать Azure Databricks для выполнения сложных аналитических задач, включая ETL-задачи и рабочие процессы машинного обучения.
• Использовать основы Spark для оптимизации производительности задач обработки больших данных.
• Сотрудничать с межфункциональными командами для понимания бизнес-требований и перевода их в технические решения.
• Обеспечивать качество данных путем внедрения соответствующих проверок валидации и механизмов обработки ошибок.
• Близко работать с командами DevOps для интеграции процессов инженерии данных в конвейеры CI/CD.
• Контролировать производительность конвейеров данных и устранять возникающие проблемы.
• Документировать технические спецификации, процессы и лучшие практики.

Требования:

• Степень бакалавра в области компьютерных наук или связанной области (или эквивалентный опыт работы).
• Подтвержденный опыт работы в качестве инженера данных или аналогичной роли на крупных проектах.
• Экспертные знания в службах Azure, таких как Data Factory, Key Vaults и