Junior Data Engineer в Развитие КИХ (Big Data) в Псков

Big Data – один из ключевых юнитов МТС. Сегодня Big Data – это: 20 петабайт данных, 5 000 метрик на профиль и 400 увлеченных профессионалов в команде

Команда центра Big Data находится в поиске Junior Data Engineer на продукт DataHouse, в команду Развития КИХ

DataHouse - продукт, который обеспечивает доступ к структурированным (централизованным) данным различных индустрий экосистемы, позволяющим производить аналитику по различным бизнес направлениям.

Новый сотрудник будет разрабатывать и развивать корпоративное информационное хранилище.

Чем предстоит заниматься

Делать расчет витрин на кластере Hadoop с помощью Spark;
Осуществлять доставку результатов расчета в аналитические СУБД;
Заниматься выстраиванием регламентов;
Поддерживать разработанные пайплайны;
Оптимизировать и развивать пайплайны;
Анализировать и устранять ошибки в работе регламента, перезапускать процессы

Что мы ожидаем

Опыт работы в роли дата инженера не менее 1 года;
Базовые знания Python (предстоит работа с большими объемами данных);
Знание SQL (знание аналитических функций, навыки оптимизации и чтения планов запросов);
Навыки работы с терминалом, git, airflow (или другие оркестраторы);
Хорошо если есть опыт с MPP (но необязательно);
Будут плюсом знания Spark и Hadoop (Понимание назначение, архитектура HDFS, понимание механизма работы, дополнительным плюсом будет опыт взаимодействия с Hive или аналогами типа Impala)

Что мы предлагаем

График работы: плавающее начало рабочего дня, гибридный график (или возможность работать из дома);
ДМС с 1 месяца работы, куда включены: стоматология, страхование жизни и страховка при поездках за рубеж;
Десятки курсов и тренингов в Корпоративном университете МТС и Собственная виртуальная библиотека;
Корпоративный психолог и карьерный коуч;
Спорт: спортзал в офисе, компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др.;
Well-being: массажный кабинет, массажные кресла и массаж на рабочем месте;
Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION и бесплатная подписка на МТС Premium;
Программа «Invite IT» (реферальная программа поощрения за рекомендацию ИТ-специалиста)

Детальная страница вакансии