Архив: Middle Data Engineer (МТС Big Data)

По итогам собеседования
МТСМТС, Москва, опыт от 2 лет, full-time

Big Data в МТС место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга «Кто звонит?» или Спам blacklist.

Сейчас мы ищем Data Engineer в Продвижение Финансовых Сервисов МТС Банка

Продукт состоит из трех составляющих:

  1. Единая система рекомендаций — генерирует регулярные сегменты для устоявшихся направлений.
  2. R&D лидогенерация — проверяет продуктовые гипотезы.
  3. Персонализация — дифференцирует клиентов для выбора наиболее подходящего подхода к каждому из них, управляет сегментами промо-кампаний для клиентов Daily Banking.

Что предстоит делать?

  • Автоматизация сбора витрин (hive)
  • Автоматизация передачи сегментов (etl в другие БД)
  • Сбор регламентных процессов с помощью airflow
  • Автоматизация переобучения ml моделей
  • Автоматизация A/B тестирования + необходимо настраивать DQ и мониторинга для реализованных решений
  • Необходимо настраивать DQ и мониторинга для реализованных решений

Кого мы ищем?

  • Опыт работы с данными в одной из отраслей: телеком, интернет-компании, банки, страхование, ритейл
  • Понимание моделей данных и принципов устройства хранилищ данных
  • Хорошее знание SQL
  • Опыт работы хотя бы с одной промышленной БД
  • Знание стека Hadoop/Hive/Spark и опыт работы с большими объемами данных
  • Знание одного из языков программирования: Python, Scala
  • Навыки загрузки данных из неструктурированных источников (data exploration, data wrangling, data cleansing)
  • Умение работать в Unix консоли, базовое понимание (как минимум умение читать) shell scripts
  • Хорошее знание технического английского, навыки поиска информации

Что вы найдете в команде Big Data?

Стек технологий: hdfs, hive, Apache Spark (pyspark), Airflow, python, Teradata, Linux

Команда: в команде Data engineer сейчас 30 человек (во всей Big Data МТС более 300 человек). Все Data инженеры разработчики поделены на группы со своими лидами. Каждую неделю мы обмениваемся опытом на совместных синках.

Data инженеры работают в продуктах со своей автономной командой, в которой есть все роли: аналитики, DS, разработчики, девопсы, менеджеры продукта.

Что даем взамен: условия и бонусы

  • ДМС, куда включены: стоматология, страхование жизни и страховка при поездках за рубеж
  • Десятки курсов и тренингов в Корпоративном университете МТС и «Coursera», собственная виртуальная библиотека и доступ к «O’Reilly».
  • Корпоративный психолог и карьерный коуч
  • Спорт: компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др.
  • Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION  и бесплатная подписка на МТС Premium
  • Программа performance-review и «Invite IT» (реферальная программа поощрения за рекомендацию ИТ-специалиста)
  • Программа корпоративных привилегий «PrimeZone» и скидки от наших партнеров (Invitro, Skyeng, S7 и многие другие)
  • Мощная техника для комфортной работы

Что еще интересного, кроме работы?

  • Мы частые участники митапов и конференций, где и вы можете прокачать себя в качестве спикера
  • Мы гибкие: плавающее начало дня, гибридный график (возможность несколько дней работать из дома), work-life balance
  • Мы помогаем детям из детских домов, обучаем пенсионеров безопасному поведению в сети, сдаем кровь, очищаем парки от мусора на волонтерских мероприятиях и многое другое

Есть ли обучение?

  • Локальные и международные конференции, митапы.
  • Корпоративный университет МТС и масштабная виртуальная библиотека.
  • А ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы

Сколько этапов при отборе?

Не более двух:

  1. HR + первое тех. интервью с лидом направления;
  2. Собеседование с PO и командой, выбор кандидатом проекта