Старший инженер по разработке программного обеспечения, Большие данные

О команде Команда инженеров по работе с данными о стоимости и трендах жилья в Zillow Group приносит инновационный анализ, креативность и превосходство на рынок жилья США. Мы создаем, оптимизируем, анализируем и делимся полной коллекцией показателей и анализа жилого фонда для внутренних и внешних клиентов Zillow. Наша работа помогает контекстуализировать беспрецедентную базу данных Zillow о всех домах и сотнях миллионов потребителей, предоставляя инсайты обычным потребителям и предлагая открытые данные сотням исследователей и политиков по всей стране. Вы будете работать в забавной, сотрудничествующей среде с высокопроизводительной командой, обладающей разнообразным набором навыков инженерии данных и аналитических навыков. Ваша работа будет иметь значительное влияние. Данные, которые мы производим, оказываются в самых авторитетных изданиях страны, используются государственными учреждениями для разработки политики и официальных отчетов, заполняют инструменты, обращенные к публике, используемые миллионами потребителей Zillow, и лежат в основе работы сотен академических исследователей. Маленькая команда = большое влияние. Наши инженерные команды сверхдесцентрализованы, обеспечивая скорость и автономность старт-апов при этом используя ресурсы более крупной компании. О роли Мы обрабатываем сотни миллионов точек данных для создания макроэкономических индикаторов рынка жилья, прогнозов и инсайтсов. Мы публикуем эти инсайты, чтобы позволить бизнесу, политикам и людям принимать обоснованные решения о домах. Мы также являемся ключевым компонентом разведки рынка жилья для наших внутренних бизнесов и важным участником тактических и стратегических бизнес-решений с клиентами по всей организации, включая маркетинг, финансы и бизнес-юниты ML до исполнительных директоров. Мы ищем опытного инженера для тесной работы с нашими командами по работе с данными и прогнозированию, а также с клиентами, чтобы помочь нам реконструировать наши быстро развивающиеся продукты по работе с данными и процесс обработки данных от начала до конца и разработку моделей. У вас будут отличные возможности для изучения передовых экосистем и облачных технологий, а также работы с группой универсальных разработчиков программного обеспечения в ориентированной на команду, поддерживающей атмосфере. Вы будете: - Строить системы обработки данных от начала до конца для загрузки сырых данных и конкретных инсайтов о трендах в области жилья. - Создавать и расширять наш внутренний фреймворк разработки прогнозных моделей. - Разрабатывать, строить и поддерживать масштабируемые продукты по работе с данными и поставлять конвейеры, созданные для скорости, точности и согласованности, которые масштабируются по мере роста наших потребностей и потребностей наших пользователей. - Определять, проектировать и внедрять улучшения внутренних процессов, включая автоматизацию ручных процессов, оптимизацию доставки данных, перепроектирование инфраструктуры для большей масштабируемости и производительности и т. д. - Проектировать и внедрять инструменты на основе LLM-чатботов для помощи нашим клиентам в лучшем понимании наших данных и повышении их производительности. - Быть надежным партнером для экономистов, прикладных ученых и аналитиков данных. - Сотрудничать с несколькими командами, включая наши команды по науке о данных, прогнозированию, инженерии и имущественным данным, для эффективного использования собственных наборов данных Zillow для создания ведущих в отрасли показателей и прогнозов жилья. - Переводить требования в планы разработки и эффективно выполнять цели. Эта роль классифицируется как удаленная позиция. "Удаленные" сотрудники не имеют постоянного места работы в корпоративном офисе и вместо этого работают из физического места по их выбору, которое должно быть определено компании. Сотрудники могут жить в любом из 50 штатов США, с ограниченными исключениями. В Калифорнии, Колорадо, Коннектикуте, Неваде, Нью-Йорке и Вашингтоне стандартный диапазон базовой заработной платы для этой роли составляет от 159 400,00 до 254 600,00 долларов в год. Этот диапазон базовой заработной платы относится специально к Калифорнии, Колорадо, Коннектикуту, Неваде, Нью-Йорку и Вашингтону и может быть не применим к другим местам. Помимо конкурентоспособной базовой заработной платы, на эту позицию также могут предлагаться премии в форме акций на основе таких факторов, как опыт, производительность и местоположение. Фактические суммы будут варьироваться в зависимости от опыта, производительности и местоположения. Кто вы - Имеете опыт работы в Python, Spark, SQL и Hive для аналитики данных и разработки ETL конвейеров. - Опыт построения систем на облачных платформах AWS обязателен. - Глубокие знания больших экоcистем данных и платформ, включая Spark, EMR, EKS, Hive, Hadoop, Presto, Kubernetes и Airflow. - Практический опыт работы с технологиями Lakehouse, такими как Databricks, Delta Lake, HUDI, Iceberg, является значительным преимуществом. - Знакомство с процессами и инструментами разработки программного обеспечения Agile / DevOps, такими как GitLab и CI / CD. - Доказанный опыт в построении и оркестровке пакетных и реал-таймовых ETL конвейеров, обработка огромных объемов данных из различных источников. - Хорошее понимание концепций науки о данных, основных алгоритмов / библиотек машинного обучения, и цикла разработки является обязательным. - Опыт сотрудничества с учеными-датологами для проведения инжиниринга функций, развертывания моделей машинного обучения в производственной среде и выявления возможностей для роста. - Сильные навыки анализа данных для тщательного изучения проблем с данными и предоставления всеобъемлющих ответов на запросы клиентов. - Прочная способность к анализу первопричин для решения операционных проблем и выявления возможностей для улучшения. - Хорошее понимание измерения и обеспечения качества данных в масштабе, а также экспертиза в необходимых инструментах для мониторинга и оптимизации производительности всех конвейеров данных. - Знакомство с технологиями LLM (OpenAI API и др.) является преимуществом. - Не менее 5 лет опыта в Big Data Engineering, Machine Learning Engineering или Data Analytics. Познакомьтесь с нами Zillow переосмысливает недвижимость, чтобы помочь сделать владение домом реальностью для все большего числа людей. Занимая позицию самого посещаемого сайта о недвижимости в Соединенных Штатах, Zillow® и его филиалы помогают переезжающим найти и обезопасить свой дом с помощью цифровых решений, партнеров премиум-класса и более простых способов покупки, продажи, финансирования и аренды. Каждый месяц миллионы людей посещают сайты Zillow Group для начала поиска дома, и теперь они могут полагаться на Zillow, чтобы облегчить переезд. Работа, которую мы выполняем, помогает людям найти свои дома, и независимо от того, какую работу вы выполняете, вы будете играть ключевую роль в том, чтобы сделать владение домом реальностью для большего числа людей. Наши усилия по оптимизации сделок с недвижимостью поддерживаются сильной культурой инноваций, страстью к переосмыслению опыта работы, фундаментальным обязательством к равенству и принадлежности, а также первоклассными льготами, которые включают всеобъемлющие медицинские, стоматологические, зрительные, жизненные и страховые покрытия, а также отпуск по уходу за ребенком, семейные льготы, отчисления на пенсию и оплачиваемый отпуск. Мы также устанавливаем стандарт для будущих рабочих опытов, где наши сотрудники поддерживаются в достижении своей лучшей работы и жизни с гибким равновесием. Вы не обязаны просто верить на наше слово. Вы можете прочесть недавние отзывы на Glassdoor и увидеть недавние отзывы от многих организаций, включая 100 лучших компаний для работы, награду Glassdoor Employees’ Choice, индекс гендерного равенства Bloomberg, корпоративный индекс равенства Human Rights Campaign (HRC) и список 100 самых влиятельных компаний TIME. Zillow Group является равноправным работодателем, стремящимся создать всеобъемлющую, инновационную среду с лучшими сотрудниками. Мы обязуемся к равноправию при трудоустройстве независимо от расы, цвета кожи, наследства, религии, пола, национальности, сексуальной ориентации, возраста, гражданства, семейного положения, инвалидности, гендерной идентичности или ветеранского статуса. Если у вас есть инвалидность или особые потребности, требующие приспособления, пожалуйста, свяжитесь с нами по адресу [email protected]. Соискатели, которые получают предложения о работе от Zillow Group, будут попрошены подписать соглашение о собственных правах, которое включает положения о конфиденциальности, передаче интеллектуальной собственности, непоachingе клиентов и сотрудников и неконкуренции. Если с вами связались по поводу роли в Zillow Group и вы хотите просмотреть копию соглашения о собственных правах до получения предложения, вы можете запросить копию у своего рекрутера.