Data Engineer / Architect

Тип работы: Полная занятость

Команда IT-профессионалов Amivero отлично справляется с предоставлением передовых цифровых услуг, которые улучшают операции федерального правительства. Наш фокус охватывает национальную безопасность до улучшения государственных услуг. Применяя человекоориентированный и основанный на данных подход, мы стремимся понять среду и переосмыслить успешные результаты вместе с нашими клиентами.

Наши технологи используют современные, гибкие методологии для проектирования и разработки справедливых, доступных и инновационных данных и программных сервисов, влияющих на миллионы. Как гордый член команды Amivero, вы будете использовать эмпатию, страсть к службе и проактивный подход для модернизации важной правительственной ИТ-системы.

Гражданство США: Обязательно для получения Public Trust

Предпочтительные допуски безопасности: Активный Public Trust Министерства внутренней безопасности, EOD или Top Secret Clearance

Образование и опыт: Степень бакалавра плюс 4 года соответствующего опыта

Предпочтительные технические навыки: Python, Airflow, Terraform, RDS, Databricks

В качестве Инженера / Архитектора данных вы будете частью команды, ответственной за разработку корпоративного уровня платформ данных, сервисов и конвейеров. Ваша страсть к данным и экспертиза в решении проблем будут важны для продвижения нашей корпоративной среды.

• Проектирование и внедрение эффективных платформ данных для работы со структурированными и неструктурированными данными.
• Использование концепций DataOps и инструментов автоматизации, таких как Terraform, Apache Airflow, CloudBees, шаблоны CloudFormation и действия Git.
• Настройка конвейеров данных с встроенной проверкой и валидацией с использованием открытых библиотек, предпочтительно Python.
• Определение аналитического и эффективного дизайна данных для передовых бизнес-решений.
• Использование инструментов BI и аналитической отчетности, таких как Tableau и Jasper Reports.
• Работа с реляционными базами данных (Oracle/PostgreSQL) для получения данных и расшифровки отношений.
• Оценка и проектирование эффективных моделей данных с рекомендациями по оптимизации.
• Тесное сотрудничество с другими ИТ-подразделениями для улучшения вычислительной среды.
• Актуализация знаний последних тенденций и технологических практик в области данных, включая Data Mesh.
• Использование AWS GovCloud, IAM Security, RDS, Role-Based Access Control (RBAC) и Docker.
• Миграция сред с учетом производительности и надежности.

Мы ищем кандидатов с:

• 4+ лет прямого опыта в области инженерии данных.
• Знание инструментов больших данных, таких как Hadoop, Spark, Kafka и т.д.
• Сильные навыки работы с реляционными SQL и NoSQL базами данных, включая Postgres и Cassandra.
• Опыт работы с инструментами управления конвейерами данных и рабочими процессами, такими как Azkaban, Luigi, Airflow и т.д.
• Знание облачных сервисов AWS, включая EC2, EMR, RDS, Redshift (или эквиваленты в Azure).
• Знание систем потоковой передачи данных, таких как Storm и Spark-Streaming.
• Экспертиза в поисковых инструментах, таких как Solr, Lucene, Elasticsearch.
• Опыт работы с объектно-ориентированными/скриптовыми языками: Python, Java, C++, Scala и т.д.
• Знание Apache Airflow, CloudBees, CloudFormation.
• Опыт работы с инструментами визуализации данных, такими как Tableau или PowerBI.
• Экспертиза в Python.
• Опыт работы