Bigdata Cloud Developer - Spark - Assistant Manager

State Street, провідний опікунський банк та надавач фінансових послуг, шукає кваліфікованого розробника хмарних рішень для великих даних для підсилення нашої динамічної команди. Ця роль є критичною, оскільки ми просуваємось через цифрову трансформацію, використовуючи передові технології, такі як обчислення в хмарі, ШІ та автоматизацію роботизованих процесів.

Як розробник хмарних рішень для великих даних, ви присвятите 80% свого часу практичній роботі над дизайном, розробкою та архітектурними зусиллями. Ця посада вимагає знань в Spark на Scala, AWS і Databricks, з бажаним досвідом у фінансових послугах та проектах, пов'язаних з FCC. Ви будете керувати DataSync, DMS, DBFS Utils, Clusters, Notebooks та Workflows, і налаштовувати продуктивність для оптимізації процесів. Ваші навички інженерії даних зміцнять наші проекти, оскільки ви будете працювати самостійно, вимагаючи мінімального нагляду для надання ефективних рішень з агільністю.

Від кандидатів очікується, що вони матимуть як мінімум 8 років досвіду в ІТ та 3 роки в середовищах AWS/Databricks, поряд з міцним фоном у розробці підприємство-рівневих застосунків. Ви повинні мати широкий досвід у аналізі даних, розробці ETL, дизайні та Spark на Scala. Знання Python для скриптування, оркестрації та знайомство з RDBMS, Data Warehouses і Unix Shell Scripts є критичними. Ми цінуємо знання у фінансовій сфері та відмінні навички усного та письмового спілкування. Досвід роботи з Agile методологією є обов'язковим.

Навички, які вважаються обов'язковими, включають Hadoop, Spark, Scala, Unix shell scripting, Cloud Migration, AWS, Databricks, і знання інструментів, таких як SVN, GIT, JFrog, Jenkins, VeraCode, SQL та ETL. Навички в Airflow і Quantexa є бажаними.

Global Technology Services (GTS) в State Street відіграє важливу роль у нашому операційному успіху