Инженер данных Azure/Databricks - Empower (удаленная работа/работа в США)

Описание компании

Обзор компании

Hitachi Solutions - это глобальный интегратор решений, целями которого являются разработка, проектирование и внедрение передовых облачных решений, которые помогают нашим клиентам в инновационном развитии всего своего бизнеса. Наша компания разрабатывает бизнес-услуги и технологии, которые обеспечивают работу некоторых продуктов, которыми вы пользуетесь каждый день, и тесно сотрудничает с Microsoft и другими лидерами в области облачных технологий.

То, что отличает Hitachi Solutions от других, - это как наша отраслевая специализация, так и уникальное интеллектуальное собственность, которую мы предлагаем нашим клиентам. Мы постоянно получаем признание благодаря нашему успеху и стремимся действовать как доверенные советники для крупных и средних предприятий, помогая им быстро достигать стратегических бизнес-целей с помощью исключительной инженерии, тяжелого труда и сострадания. За 18 лет нашим сотрудникам из 14 стран мира, которых более 3 000 человек, постоянно предлагаются высоко конкурентоспособные зарплаты, пенсионные программы, отпуск по уходу за ребенком и медицинское страхование. При этом уверям вас, что мы не потребуем от вас поездок в офис или привязки к негибкому графику работы.

Будучи частью Hitachi, Ltd., наша компания использует долгую и богатую историю инноваций, сильную финансовую опору и международное присутствие одной из крупнейших корпораций в мире. С момента своего основания в 1910 году Hitachi, Ltd. является лидером отрасли в создании инновационных продуктов и решений, которые укрепляют отраслевую и общественную инфраструктуру в масштабе всего мира, а также сотрудничает с 303 000 сотрудников в более чем 100 странах и 864 компаниях.

Команда по разработке новых продуктов и инноваций

В 2021 году мы создали команду по разработке новых продуктов и инноваций в рамках нашей компании. Вступление в эту группу дает возможность ускорить свою карьеру и сотрудничать с командой энтузиастов и преданных коллег в среде, где приветствуются новаторские подходы: хорошо финансируемой, быстро растущей, готовой к быстрым перемена и способной учиться на своих ошибках в целях инноваций и эффективного проектирования.

Поддерживаемая существующей базой клиентов и стабильной финансовой материнской компанией, цель этой группы - привести к внедрению пакетов продуктов компанией, что упростит облачные сервисы для наших клиентов и позволит нам достижения в долгосрочной перспективе наших финансовых целей в большей степени, чем линейную шкалу.

Описание вакансии

Обратите внимание: Несмотря на то, что это место работы позволяет работать удаленно, из вашего дома или любого другого места, вам НЕОБХОДИМО проживать в Соединенных Штатах и иметь разрешение на работу там без спонсорства. К сожалению, мы можем принять заявки только от граждан США и постоянных резидентов США - без переводов по контракту C2C или H1.

ИНЖЕНЕР ПО ДАННЫМ (DATABRICKS, PYTHON, SPARK)

Мы предлагаем полный рабочий день в нашей продуктовой организации для опытного инженера по данным, специализирующегося на проектировании систем больших данных и обладающего навыками в области архитектуры данных, особенно сфокусированных на технологиях Spark и Delta/Data Lake.

Сотрудники на этой должности будут помогать в проектировании, разработке, модернизации и поддержке сложных продуктов обработки данных, которые управляют критически важными для бизнеса операциями и обширными аналитическими потоками. Квалифицированные претенденты должны продемонстрировать быструю способность к освоению новых концепций, иметь опыт в области инженерии данных или значительный опыт в области программной инженерии.

Обязанности

• Определение и выполнение задач в сотрудничестве с руководством команды. Разработка понимания возможностей платформы с командой и определение наилучших способов их улучшения и расширения.
• Сильная независимость и автономность.
• Проектирование, разработка, обновление и поддержка сложных продуктов обработки данных, которые управляют критически важными для бизнеса операциями и обширными аналитическими приложениями.
• Опыт руководства инженеров среднего и высшего уровня по работе с данными.
• Предоставление поддержки аналитическим, командам по работе с данными и/или инженерным командам, понимание их уникальных потребностей и проблем.
• Внедрение высоких стандартов в процессы, методологии, стандарты и выбор технологий команды.
• Быстрое приспособление к новым концепциям для совместимости с быстро развивающейся технологией обработки данных.
• Постоянное обучение для поддержания команды в курсе последних разработок в области.
• Стремление улучшить техническую зрелость во всей компании.

Требования

• Более 5 лет опыта работы в области инженерии данных, включая как минимум 2 года проектирования и построения конвейеров данных Databricks, является ОБЯЗАТЕЛЬНЫМ; опыт работы с облаком Azure предпочтителен, но мы также рассмотрим опыт работы с AWS, GCP или другой облачной платформой.
• Опыт работы с концептуальными, логическими и/или физическими проектами баз данных ВЫСОКО ЖЕЛАТЕЛЕН
• Более 2 лет практического опыта работы с Python/Pyspark/SparkSQL является ОБЯЗАТЕЛЬНЫМ; опыт работы с Scala является преимуществом
• Более 2 лет опыта работы с большими данными или инструментами DAG (такими как Airflow, Dbt, Data Factory или похожие) является ОБЯЗАТЕЛЬНЫМ
• Более 2 год опыт работы с Spark (особенно Databricks Spark и Delta Lake) является ОБЯЗАТЕЛЬНЫМ
• Более 2 лет практического опыта реализации решений для больших данных в облачном экосистеме, включая Data/Delta Lakes, является ОБЯЗАТЕЛЬНЫМ
• Более 2 лет опыта работы с системой контроля версий (git) в командной строке является ОБЯЗАТЕЛЬНЫМ
• Более 2 лет опыта работы с SQL, в частности, в написании сложных, высоко оптимизированных запросов на большие объемы данных, ВЫСОКО ЖЕЛАТЕЛЕН
• Сильные способности к моделированию данных/профилированию данных с использованием методологии Kimball/star schema ВЫСОКО ЖЕЛАТЕЛЬНЫ
• Профессиональный опыт работы с Kafka или другой технологией в режиме реального времени ВЫСОКО ЖЕЛАТЕЛЕН
• Профессиональный опыт работы с пайплайнами развертывания баз данных (например, dacpac или аналогичная технология) ВЫСОКО ЖЕЛАТЕЛЕН
• Профессиональный опыт работы с одним или несколькими фреймворками для проведения единичного тестирования или контроля качества данных ВЫСОКО ЖЕЛАТЕЛЕН

#LI-CA1

#REMOTE

#DATABRICKS

#SPARK

#DATALAKEHOUSE

#BIGDATA

Дополнительная информация

Мы являемся работодателем, предоставляющим равные возможности. Мы не дискриминируем в процессе найма по возрасту, расе, цвету кожи, религии, полу, сексуальной ориентации, гендерной идентичности, национальности, ветеранскому статусу или инвалидности.

Дополнительная информация:

Все ваши данные будут храниться в тайне в соответствии с принципами равных возможностей при трудоустройстве.

Диапазон зарплат*: от 97,5 тысяч USD до 175 тысяч USD

*Этот диапазон зарплат предоставляется только в качестве общего руководства и не гарантирует компенсацию или зарплату. При предложении о работе учитываются другие факторы. К ним относятся (но не ограничиваются) обязанности на рабочем месте, образование, опыт работы, соответствующие навыки для должности, внутренняя справедливость, соответствие рыночным данным и другие юридические требования.

Обзор других компенсаций / льгот:

В дополнение к базовой зарплате выбранный кандидат может быть допущен к участию в следующих планах / программах, как только будут выполнены все требования к найму:

· Бонусный план

· Медицинское, стоматологическое и зрительное страхование

· Страхование жизни и инвалидности

· Пенсионные накопления с поддержкой компании

· Оплачиваемый отпуск

· Гибкие условия работы, включая удаленную работу