Data Engineer Lead

О компании Glean

В Glean наша миссия - ускорить работу с знаниями, делая её более человечной и эффективной. Мы видим будущее, где ИИ трансформирует рабочие процессы, позволяя ИИ ассистентам заниматься поиском знаний, синтезом информации и выполнением задач. Эта трансформация позволит людям сосредоточиться на креативных аспектах своей работы.

Мы разрабатываем интеллектуальную систему для каждой компании в мире. Представьте это как Google + ChatGPT для предприятий. Наша платформа выступает мостом, соединяющим ИИ и знания. Она агрегирует информацию компании, глубоко понимает её, обеспечивает высочайшую релевантность поиска и связывает её с генеративными ИИ агентами и приложениями.

Основанная инженерами из Google и Facebook, Glean использует глубокие технические знания и страсть к ИИ для удовлетворения потребностей в секторе предприятий. Мы разношерстная команда, стремящаяся помогать друг другу достигать удивительных целей, чтобы мы могли делать то же для других команд.

Нас поддерживают ведущие венчурные капиталисты, такие как Sequoia, Kleiner Perkins, Lightspeed и General Catalyst. В нашу команду входят старшие лидеры из Google, Slack, Facebook, Dropbox, Rubrik, Uber, Intercom, Pinterest, Palantir и других компаний.

Роль инженера данных: Ведущий инженер данных

Glean создает первоклассную организацию данных, состоящую из групп науки о данных, прикладной науки, инженеров данных и бизнес-аналитики. Наша команда инженеров данных будет базироваться в Бангалоре, Индия. Мы набираем нашего первого инженера данных. В этой роли вы будете:

• Начать как активный индивидуальный сотрудник. Демонстрировать высокое качество выполнения и лидерские навыки, чтобы стать первым сотрудником группы инженеров данных в организации.
• Улучшать доступность высокоценных исходных данных, выполняя:
  • Получение входящих данных от науки о данных и бизнес-аналитики для определения данных
  • Сотрудничество с продуктовым инженером по инициативам и процессам журнала продуктов
  • Работа с командами Go-to-Market и финансовыми операциями для упрощения управления данными в корпоративных приложениях, таких как Salesforce, Marketo и бухгалтерское ПО
• Проектировать и внедрять ключевые таблицы для преобразования структурированных и неструктурированных данных в рабочие модели для данных, операций и инженерии.
• Поддерживать и обеспечивать качество и доступность данных в рамках разумных уровней обслуживания (SLA).
• Повышать надежность, эффективность и масштабируемость инструментов ETL, включая dbt, BigQuery, Metabase.
• Сотрудничать с бизнес-аналитикой для улучшения надежности, масштабируемости и удобства использования инструментов анализа данных и визуализации, таких как Metabase, для команд по данным, продукту, инженерии и операциям.
• Внедрять дружественные для разработчиков лучшие практики для нашего набора данных, обеспечивая эффективное написание кода для команд по данным, операциям и инженерии.

Ключевые квалификации

Кандидаты будут успешны в этой роли, если они:

• Имеют более 8 лет опыта в области инженерии данных/программного обеспечения (7+ лет для обладателей степени магистра, 5+ для кандидатов наук).
• Обладают более 1 года опыта управления в качестве технического руководителя и наставляли инженеров данных.
• Свободно владеют SQL и могут устанавливать лучшие практики, улучшая базу пользователей SQL в организации.
• Имеют опыт работы с Python, Java или Golang.
• Имеют опыт работы с облачными инструментами для обработки данных, такими как BigQuery и dbt.
• Умеют работать с инструментами обработки больших данных, такими как Beam и Spark.
• Знают инструменты пайп