- Мінімум 10-14 років консалтингового або клієнтського досвіду доставки на Azure.
- Доведений досвід роботи як Архітектора Azure, проектування та надання архітектурних рішень відповідно до вимог клієнта.
- Досвід налаштування середовищ Azure згідно з кращими практиками Microsoft.
- Здатність володіти архітектурою, визначати стандарти, керівні вказівки та кращі практики під час впровадження.
- Відстеження стану проекту, перегляд артефактів від членів команди та надання напрямків для будь-яких відхилень.
- Досвід керівництва в наставництві команд.
- Мінімум 5 років досвіду розробки потоків даних для велечезних даних, реляційних баз даних як MySQL, та рішень для сховищ даних як Snowflake.
- Широкий практичний напрямок з Azure Native services та Hadoop.
- Практичний досвід з впровадження потоків даних, ETL та обробки з використанням Azure послуг (ADLS, Azure Data Factory, Azure Functions, Synapse/DW, Azure SQL DB, Event Hub, IOT Hub, Azure Stream Analytics, Azure Analysis Service, HDInsight, Databricks, Azure Data Catalog, Cosmo DB).
- Мінімум 3-х років практичного досвіду з технологіями Azure і Великих Даних, такими як Python, SQL, ADLS/Blob, Spark/SparkSQL, Databricks, Hive, і потоковими технологіями як Kafka, EventHub, NiFi.
- Володіння навичками розробки на Pyspark у Databricks.
- Досвід роботи в DevSecOps і CI/CD розгортаннях.
- Розуміння методологій та інструментів міграції в хмару таких як Azure Data Factory, Data Migration Service, Event Hub, Kafka.
- Мінімум 3 роки досвіду роботи з RDBMS.
- Досвід використання форматів файлів Великих Даних та технологій стиснення.
- Володіння інструментами розробки, такими як Azure DevOps, Visual Studio Team Server, Git, Jenkins.
- Досвід роботи з архітектурами приватних та публічних хмар, включаючи переваги та недоліки та облік при міграції.
- Бакалаврська чи вища ступінь в комп’ютерних науках чи суміжній дисципліні; або еквівалент (мінімум 2 роки досвіду роботи). Якщо асоціативна ступінь, повинен мати мінімум 2 роки еквівалентного досвіду роботи.
Як Azure Data Engineer, ви будете відповідальними за проектування, побудову та підтримку інфраструктури даних для нашої організації використовуючи хмарні послуги Azure. Відповідальності включають:
- Створення потоків даних та інтеграція даних з різних джерел.
- Впровадження заходів з безпеки та конфіденційності даних.
- Моніторинг та усунення неполадок в ході потоків даних.
- Оптимізація зберігання та обробки даних для підвищення продуктивності та економічної ефективності.
- DevOps на платформі Azure.
- Досвід розробки та впровадження ETL рішень на Azure.
- Знання IoT, подійного керування, мікросервісів та Containers/Kubernetes у хмарі.