Название вакансии: Junior/Middle Data Engineer
Город: Москва
Зарплата: от 80 000 до 150 000
Формат работы: офис
Требования: - Понимание работы Hive, Spark на Hadoop.
- Базовые знания языков программирования Python.
- Знание SQL на уровне аналитических запросов.
- Понимание объектно-ориентированного подхода к разработке.
- Умение обращаться с git, bash.
- Будет плюсом опыт разработки на Spark/pyspark, оптимизация выполнения сценариев на Spark и понимание процессов ETL, ELT.
Задачи: - Исследование источников данных (внешних данных, реплик АС Банка, других витрин).
- Разработка и изменение витрин данных на Hadoop/greenplum исходя из требований аналитиков данных.
- Создание алгоритмов загрузки данных в витрины с учётом историчности, уникальности, логики обновления таблиц.
- Написание функций для первичной обработки, преобразования и агрегации данных на Spark (Scala, Java, Python).
Условия: - Современный Agile-офис с системой умный дом и зонами отдыха
- Официальное оформление с первого дня
- Стабильный оклад и социальная поддержка сотрудников
- Корпоративное обучение за счет компании
- Расширенный ДМС с первого дня для сотрудников и льготное страхование для близких
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- Крупнейшее DS&AI community – более 600 DS-специалистов банка
- Дайджест о самых последних разработках в области DS&AI и отчеты с крупнейших конференций мира
О команде/продукте/проекте Наша команда занимается разработкой витрин данных и созданием внутренних инструментов для автоматизации процесса разработки и вывода, исследованием новых источников данных, помогает командам соседних подразделений построить интеграцию с нашими процессами.
Мы ищем специалиста, желающего развиваться в Big Data.