Data Engineer, GovEx

Мы активно ищем Инженера по данным для вступления в нашу команду в Центре по совершенствованию государственного управления (GovEx) при Университете Джонса Хопкинса. Эта ключевая роль включает в себя создание и обработку сложных потоков данных, которые преобразуют сырые данные в наглядные визуализации, помогая местным правительствам принимать обоснованные решения.

Основные обязанности:

• Разработка, производство и поддержка эффективных потоков данных.
• Разработка и поддержка процессов ETL/ELT с использованием как структурированных, так и неструктурированных источников данных.
• Построение и управление системами веб-скрапинга для автоматизированного сбора данных.
• Занятие управлением базами данных, включая запросы к данным и написание скриптов.
• Внедрение и управление потоками данных с использованием передовых технологий хранения данных.

Обеспечение качества данных (25%)

• Разработка программных решений для мониторинга и улучшения качества данных.
• Выполнение ежедневных задач для обеспечения качества данных и устранения любых проблем.

Анализ данных и визуализация (15%)

• Извлечение и анализ данных для генерации выводов и поддержки исследовательских усилий.

Дополнительные обязанности (10%)

• Сотрудничество с командой разработчиков, специалистов по данным и аналитиков.
• Поддержание связи с внутренним руководством и внешними партнерами.

Требуемые навыки и квалификация:

• Владение Python, SQL и реляционными базами данных для надежной работы с данными.
• Выдающееся внимание к деталям и сильные организационные способности.
• Способность работать самостоятельно с ориентированностью на командную работу.
• Степень бакалавра с минимум пятью годами опыта работы в управлении и проектировании баз данных.

Предпочтительные квалификации:

• Продвинутые степени в области информатики, информационных систем, инженерии или в смежных областях.
• Опыт разработки и управления процессами ETL/ELT.
• Владение инструментами оркестрации рабочих процессов, такими как Airflow, и проектированием хранилищ данных.
• Навыки работы с инструментами управления проектами, такими как Asana и Slack, а также системами управления вер