Summary
Written in English from the original postingBell Integrator is hiring a Data Engineer to develop and optimize data marts and data pipelines for a corporate lending product. The position focuses on building ETL/ELT processes and deploying data transfer services using Spark, Hadoop, and Python/Scala/Java. This is an on-site role based in Moscow.
Job description
Bell Integrator – крупный системный интегратор страны. Мы являемся аккредитованной ИТ– компанией.
На текущий момент с нами работает более 2500 высококлассных аналитиков, руководителей проектов, разработчиков, тестировщиков и специалистов по сопровождению крупных информационных систем. Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – ведущие системообразующие финансовые, телеком и ритейл компании страны.
Центральный офис Bell Integrator расположен в Москве, представительства – в Санкт-Петербурге, Нижнем Новгороде, Пензе, Саратове, Уфе, Барнауле, Минске (Беларусь).
Наша команда реализует продукт кредитования юридических лиц сегмента малого и микробизнеса. Мы закончили процесс миграции на новые системы и сейчас начинаем активно развивать продукт и делать его лучше для клиентов. Впереди много интересных задач и идей, которые сделают нас лучше
Необходимые навыки:
- Знание SQL на уровне аналитических запросов (подзапросы, агрегация, оконные функции);
- Умение обращаться с git, bash.
- Знания языков программирования Java/Scala, Python;
- Понимание работы Hadoop, принципов распределенной обработки данных
- Опыт разработки на Spark/PySpark;
- Оптимизация выполнения сценариев на Spark;
- Понимание процессов ETL, ELT
Задачи:
- Исследование источников данных (внешних данных, реплик АС Банка, других витрин);
- Разработка, тестирование витрин данных исходя из требований стейкхолдеров на Spark (Scala, Java, Python)
- Поддержка существующих витрин данных
- Разработка, сопровождение, развертывание в прод-контуре сервисов передачи данных
Мы предлагаем:
- Возможность профессионального и карьерного роста в компании
- Возможность поучаствовать в разных проектах
- Опыт работы в распределенной команде профессионалов
- Уровень заработной платы обсуждается индивидуально
- Оформление в соответствии с ТК РФ в Bell Integrator https://bellintegrator.ru/
- Формат работы ОФИС: МСК/ Кутузовский проспект 32к1
Навыки: Python, Apache Spark, Apache Hadoop