Інженер з даних

Ми шукаємо людей, які не бояться ризику, співробітників, тих, хто натхненний та може вдихати це натхнення в інших. Нас цікавлять особистості, які достатньо сміливі, щоб працювати на першій лінії та створювати рішення, які збагатять та покращать життя людей по всьому світу. Якщо ви хочете змусити світ говорити "вау", давайте говорити. Розмова починається тут. Якщо ця роль відповідає вашим амбіціям та набору ваших навичок, почнімо з вашої заявки. Не соромтеся ознайомитися з нашими іншими відкритими вакансіями. Наші численні можливості можуть призвести до нескінченних перспектив. Назва посади: Інженер-датолог Деталі проекту: Цей проект передбачає проектування та розробку доставки даних на складі даних Sony Music Publishing на AWS. Технологія та підтехнологія: AWS Базове місцезнаходження: Бенгалуру Тип: Гібридний Кваліфікація: Бакалавр технічних наук/Технолог у галузі комп'ютерних наук та досвід роботи 4+ роки. Огляд роботи: Інженер-датолог відповідає за проектування та розробку доставки даних на нашому складі даних на AWS. Ці дані будуть використовуватися в візуальних інформаційних панелях/звітах, які команди Sony Music Publishing використовують для кращого розуміння тенденцій та виявлення передбачень для покращення ринкової частки/угод авторів пісень. Основні навички: - Досвід у архітектурі даних, включаючи моделювання даних, добування даних і прийому даних. - Досвід роботи з технологіями AWS (S3 buckets, Glue, Data Pipeline, DMS, RDS, Redshift, Aurora, Lambda). - Знання створення ETL-скриптів на таких мовах, як Python, Node.js, SQL. - Досвід у роботі зі складами даних та великими даними. - Досвід роботи з реляційними базами даних (SQL Server). - Досвід роботи в Agile/Scrum командах. AWS Сервіси/Навички: - Python: Середній - PySpark: Середній - EMR/Glue: Високий - CICD: Середній - Serverless Framework: Середній - Cloud Formation Templates: Середній - Redshift: Високий - Lambdas: Високий - Step Functions: Високий - Cloud Watch: Середній - ElasticSearch/Open Search: Високий - Kibana: Високий - Kinesis: Високий - Redshift Spectrum: Високий - DMS: Високий Бажані навички: - PySpark - CICD - Cloud Formation Templates Обов'язки і обставини: - Співпраця з власниками продуктів, розробниками та командою AWS Infrastructure для проектування та розробки ETL-процесів. - Здатність до автоматизації та оптимізації процесів якомога більше. - Здатність працювати в Agile/Scrum команді. - Здатність вирішувати проблеми та пропонувати рішення. - Використання встановлених стандартів/процесів аналітики в ETL-процесах. - Здатність спілкуватися з технічними та комерційними командами. - Здатність швидко вчитися нові технології. Ключові слова: Python, PySpark, EMR/Glue, CICD, Serverless Framework, Cloud Formation Templates, Redshift, Lambdas, Step Functions, Cloud Watch, ElasticSearch/Open Search, Kibana, Kinesis, Redshift Spectrum, DMS.