Senior Big Data SW Engineer в Godel Technologies Europe

Godel находится в постоянном поиске талантливых ** старших инженеров по большим данным **, которые могут присоединиться к одной из наших команд, занимающихся разработкой бизнес-приложений для крупных британских компаний. У нас всегда есть новые интересные проекты с возможностью улучшить свои навыки в широком спектре технологий, связанных с веб-разработкой. Если вы увлеченный и амбициозный разработчик, желающий принять активное участие в формировании продукта, эта работа для вас ### Обязанности * Создание спецификаций функционального дизайна, эталонных архитектур Azure и помощь в других проектах по мере необходимости. * Проектирование и разработка решений «платформа как услуга» (PaaS) с использованием различных служб Azure. * Создайте фабрику данных, организуйте действия по обработке данных в рабочем процессе, управляемом данными, отслеживайте и управляйте фабрикой данных, перемещайте, преобразовывайте и анализируйте данные. * Разработка сложных корпоративных решений для обработки данных, использующих фабрику данных Azure. Создание планов миграции для перемещения устаревших пакетов SSIS в фабрику данных Azure. * Создание концептуальных и логических моделей данных. * Проектируйте, создавайте и масштабируйте конвейеры данных в различных исходных системах и потоках (внутренних, сторонних, а также облачных), в распределенных / эластичных средах, а также в последующих приложениях и / или решениях самообслуживания. * Разработка и документирование механизмов развертывания, мониторинга и обслуживания. * Выявление узких мест в производительности и доступ к внешним источникам данных. * Реализация требований безопасности. * Мониторинг и управление. ### Необходимые навыки * Обширные знания принципов архитектуры данных (например, озера данных, хранилищ данных и т. Д.). * Хорошее знание реляционных баз данных, а также навыки проектирования и разработки SQL-запросов. * Опыт работы с данными на Python * Концептуальное понимание облачных архитектур, уровней обслуживания и моделей гибридного развертывания. * Возможность самостоятельно устранять неполадки и настраивать производительность крупномасштабных корпоративных систем. * Опыт работы с шаблонами проектирования ETL / ELT и структурами DataMart (схемами «звезда», «снежинка» и т. Д.). * Опыт работы с Microsoft Cloud Data Platform: Azure Data Lake, хранилище BLOB-объектов Azure, фабрика данных Azure, Azure Cosmos DB, Azure Databricks, Synapse Analytics. * Опыт работы с фабрикой данных Azure (ADF), создание нескольких конвейеров и действий с использованием Azure для полной и добавочной загрузки данных в Azure Data Lake Store и Azure SQL DW. * Практический опыт работы с методологиями миграции данных и процессами для преобразования локальных данных в облако с помощью таких инструментов, как фабрика данных Azure, служба миграции данных, SSIS и т. Д. * Должен иметь способность четко общаться и быть командным игроком. * Средний уровень английского. ### В качестве плюса * Практический опыт программирования в дополнительных технологиях, таких как Python, Java, Scala, C #, Spark, Databricks, Powershell является плюсом. * Опыт работы с такими инструментами разработчика, как Azure DevOps и GitLabs. * Опыт работы с инструментом отчетности Power BI. * Понимание инструментов больших данных, таких как Hadoop. * Опыт управления средами Microsoft Azure с помощью виртуальных машин, виртуальных сетей, подсетей, сетей безопасности сети, групп ресурсов. * Требуется сертификация Azure. ### Мы предлагаем Культуру, ориентированную на доверие. Профессиональная команда. Гибкая поставка. Сложные проекты. Деловые поездки в Великобританию. Инвестиции в ваше обучение. Гибкий график работы и вариант WFH. Финансовая стабильность. дней Ежегодный оплачиваемый отпуск 1 оплачиваемый выходной в честь Вашего Дня Рождения Медицинское страхование Компенсация по болезни Компенсация для вашего проф. сертификация и поддержка вашей учебной деятельности. Корпоративные льготы (обучение, курсы английского языка, корпоративные мероприятия / тимбилдинги) _ И многое другое!: -) _ ** _Мы всегда ищем отличных людей, которые присоединятся к нашей команде! _ **