Data Engineer на продукт МТС Маркетолог (Big Data)

Big Data – один из ключевых юнитов МТС. Наши технологии применяются практически во всех направлениях компании — маркетинг, обслуживание, планирование сети, HR, розница. Мы знаем о точках концентрации абонентов и их миграциях, планах развития городских агломераций, пользовательском опыте. С помощью Big Data мы планируем сеть базовых станций, определяем места и форматы новых розничных салонов, управляем ассортиментом розничных точек, снижаем фродовые действия и не только. Сегодня Big Data – это 20 петабайт данных, 5 000 метрик на профиль и 400 увлеченных профессионалов в команде.

Мы являемся частью большого продукта МТС Маркетолог – рекламного сервиса, использующего всю мощь BigData для проведения точных и эффективных рекламных кампаний, построения аналитики и исследований.

Требования, необходимые навыки

• Spark – уметь писать с его помощью загрузки и трансформы
• Python – уметь с его помощью общаться со спарком, создавать spark-приложения
• SQL – уметь на более-менее приличном уровне ворочать данные + учитывать физику хранения данных
• Самостоятельность (уметь эффективно работать без постоянного контроля и микроменеджмента)

Задачи

• Написание spark приложений (ETL, подготовка таблиц/витрин, сбор сегментов) + смежные задачи, такие как деплой, тесты, dq и тд
• Интеграция с различными бэкендами: Kafka, HBase и другие
• Развитие python-библиотек и инструментов используемых командой разработки и аналитики
• Выполнять задачи из бэклога на спарке
• Предлагать идеи по улучшению и доработкам.

Условия работы

• Плавающее начало рабочего дня, гибридный график (возможность несколько дней работать из дома)
• ДМС, куда включены: стоматология, страхование жизни и страховка при поездках зарубеж
• Десятки курсов и тренингов в Корпоративном университете МТС, «Coursera» и собственная виртуальная библиотека
• Корпоративный психолог и карьерный коуч
• Компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др.
• Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION и бесплатная подписка на МТС Premium.