Data Engineer [RecSys Platform] Big Data в Москва

Big Data – один из ключевых юнитов МТС.

Сегодня Big Data – это: 20 петабайт данных, 5 000 метрик на профиль и 400 увлеченных профессионалов в команде.

Мы ищем Дата инженера с которым мы будем вместе развивать платформу рекомендаций в МТС. Мы уже поставляем рекомендации в онлайн-кинотеатр КИОН, в читалку «Строки», в МТС Банк и сервисы по продаже билетов.

Сейчас решаем задачи объединения рекомендательных движков в единую платформу и масштабирования на все сервисы компании, в том числе на приложение Мой МТС. Это самое крупное приложение экосистемы с несколькими десятками млн. пользователей, являющееся основным рычагом для развития экосистемы. Команде рекомендаций предстоит решить задачу персонализации наполнения главной страницы.

Чем предстоит заниматься

Строить витрины данных;
Оптимизировать пайплайны формирования витрин данных;
Развивать процессы мониторинга и проверки качества данных (DQ);
Строить интеграции с внешними источниками данных

Что мы ожидаем

Коммерческий опыт работы Data Engineer от 2 лет;
Хорошее знание Python;
Отличное знание SQL;
Коммерческий опыт со Spark (работа с большими объемами данных);
Опыт работы с любым оркестратором (желательно Airflow);
Опыт работы с экосистемой Hadoop;
Опыт работы с реляционными Базами Данных (например Postgres, Oracle, MySQL);
Понимание ML, опыт работы в команде с DS;
Желателен опыт работы с MPP-базами данных (Teradata/Greenplum);
Будет плюсом знакомство с библиотекой
OnETL-
Https://github.com/MobileTeleSystems/onetl

Что мы предлагаем

График работы: плавающее начало рабочего дня, гибридный график (или возможность работать из дома);
ДМС с 1 месяца работы, куда включены: стоматология, страхование жизни и страховка при поездках за рубеж;
Десятки курсов и тренингов в Корпоративном университете МТС и Собственная виртуальная библиотека;
Корпоративный психолог и карьерный коуч;
Спорт: спортзал в офисе, компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др.;
Well-being: бесплатный фреш-бар, массажный кабинет, массажные кресла и массаж на рабочем месте;
Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION и бесплатная подписка на МТС Premium;
Программа «Invite IT» (реферальная программа поощрения за рекомендацию ИТ-специалиста)

Детальная страница вакансии