Summary
Written in English from the original postingData Engineer for a large bank project focused on building a data warehouse for the market risk management department. Responsibilities include analyzing new data sources, developing data marts, creating SQL prototypes, supporting existing functionality, and defining data quality checks. Required experience includes SQL, Hadoop, HDFS, Hive, YARN, and Spark.
Job description
Проект крупного Банка ТОП3! Разработка хранилища для департамента управления рыночными рисками.
Твои задачи:
Проводить аналитику новых источников, реплику автоматизированных систем (АС). (Hadoop, spark)
Разрабатывать витрины данных
Строить прототипы, передавать прототипы в разработку. (SQL)
Поддерживать текущий функционал, дорабатывать текущий функционал в рамках новых требований
Формировать проверки контроля качества данных
Что мы ждем от тебя:
Уверенное знание SQL (HQL). Оконные функции, multiple join, cte, оптимизация
Опыт работы с hadoop, hdfs, hive, yarn, spark (понимание как физически лежат данные в hadoop, партиционирование таблиц и т.д.)
Опыт работы с большими данными (от 10млн записей в партиции)
Опыт работы с банковскими данными (Общее понимание продуктов банка)
Что мы предлагаем:
Корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды
Техника для комфортной работы
Работа в команде профессионалов, мотивированных на бизнес-результат
Сессии профессионального развития 2 раза в год, результатом которых является план индивидуального развития и получение обратной связи
Сообщества по интересам: Лига Спорта, Лига Кибер Спорта, Лига Интеллекта, а также возможность организовать свое сообщество и получить поддержку от компании
ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи
Навыки: SQL, Apache Hadoop, Apache Spark
