Senior Data Engineer

В Synack мы используем передовые технологии, чтобы наделить лучших специалистов по кибербезопасности возможностью защищать наш цифровой мир. Мы защищаем ведущие глобальные организации, уменьшая их риски безопасности и усиливая их защиту от киберугроз. Наш подход сочетает контролируемую платформу с опытом самых надежных этичных хакеров, обеспечивая непревзойденную безопасность.

Поддерживаемые ведущими венчурными фирмами, такими как Kleiner Perkins Caufield & Byers, Microsoft и Google Ventures, наша миссия состоит в том, чтобы использовать глобальную экспертизу в области безопасности и передовые технологии, чтобы помогать предприятиям выявлять уязвимости безопасности до того, как они станут серьезными проблемами. Откройте свое будущее с Synack!

Мы ищем опытного и инновационного Senior Data Engineer, чтобы улучшить наш хранилище данных и разработать передовые потоковые и пакетные продукты данных, которые переопределят кибербезопасность. Используя облачные технологии и методы DevOps, вы будете обрабатывать данные для повышения видимости активности нашей Красной команды и совершенствовать методы оценки, которые оценивают уровень безопасности наших клиентов.

Заинтересованы? Читайте дальше...

• Поддержка и расширение хранилища данных для предоставления аналитических данных различным заинтересованным сторонам.
• Разработка ETL пакетных конвейеров данных с использованием BigQuery или аналогичных решений, оркестрирование инструментами, такими как Airflow и Puppet.
• Использование технологий обработки потоков данных (например, Apache Flink, Kafka, Cloud Functions) для построения надежной платформы потоковой передачи событий.
• Поддержка и расширение инфраструктуры as code (на основе Terraform) для платформы данных.
• Поддержка существующих продукционных продуктов, включая API, конвейеры данных, реляционные базы данных и NoSQL хранилища документов.
• Создание моделей данных для дешбордов с использованием Looker, Tableau или Superset, а также для интерактивных приложений, встроенных в UI.
• Разработка инновационных аналитических данных и proof-of-concept идей для извлечения действенных инсайтов.
• Сотрудничество с инженерами и менеджерами продуктов по всей компании.
• Вклад в развитие методов аналитики данных, моделей Machine Learning и применения AI для реальных задач.

• 8+ лет опыта в архитектурировании хранилищ данных, таких как BigQuery, Redshift, Databricks.
• 5+ лет опыта программирования на Python, SQL и Java/Scala.
• 5+ лет опыта в реализации пакетных конвейеров данных с использованием современных технологий, таких как BigQuery или Spark.
• 3+ года опыта в проектировании и строительстве решений для обработки данных в реальном времени с использованием Kafka, kSQL, Spark, Flink или аналогичных.
• Уровень владения различными системами баз данных, включая OLAP/delta lake, реляционные базы данных (PostgreSQL) и NoSQL хранилища документов.
• Опыт ведения усилий по разработке приложений.
• Знакомство с платформами облачных технологий, в частности Google Cloud.
• Опыт в написании модульных и интеграционных тестов и использовании методов Agile разработки с помощью Git.
• Знание процессов CICD развертывания и продуктов, связанных с Docker.
• Навыки предоставления аналитических данных с использованием BI инструментов, таких как Looker и Tableau.

• Опыт использования инфраструктуры как кода с использованием Terraform.
• Опыт работы с Machine Learning в продукционной среде.
• Знания в области кибербезопасности.

Synack ценит разнообразие. Разнообразие нашей команды — наша сила. Каждый новый член команды привносит уникальные идеи, опыт и перспективы, помогая нам расти и внедрять инновации. Мы приветствуем кандидатов всех национальностей