Data engineer
TechLamoda- Зарплата:Договорная
- Тип занятости:Полная занятость
- Место работы:Офис
- Город:Москва
Оставьте свой контакт в Telegram,и HR свяжутся с вами!
Lamoda — технически сложный highload проект. Мы разрабатываем, тестируем и поддерживаем более 60 сервисов. Это системы, автоматизирующие работу склада, контакт-центров, фотостудии, службы доставки и другие операционные процессы.
Сейчас мы нам нужен Data инженер.
Чем занимается команда?
- Настройкой производительности, мониторингом, планированием емкости кластера Hadoop и другой инфраструктуры.
- Загрузкой, проверкой и обработкой внутренних и сторонних данных.
- Созданием, поддержкой и контролем потоков данных на предмет согласованности, точности и времени задержки.
- Поддержкой и улучшением структуры для заданий (Spark Streaming, Spark, MapReduce, совокупные задания в Hive).
- Обучением разработчиков/аналитиков инструментам извлечения данных.
- Проверкой/утверждением DDL для базы данных и Hive Framework, Spark Streaming заданий.
Для чего нужен новый сотрудник?
- Создания следующего поколения лучших на рынке платформ данных электронной коммерции.
- Оптимизации рабочих места для наиболее эффективного использования ресурсов Kafka, Hadoop, Spark.
- Мониторинга и обеспечения прозрачности качества данных во всех системах (точность, согласованность, полнота).
- Повышения доступности и эффективности данных.
- Наставничества и руководства для младшего члена команды.
Какие требования к соискателям?
- Высшее образование в области компьютерных наук или смежной дисциплине.
- Опыт работы со стеком Hadoop (YARN, HDFS, HBase, Hive), Spark, Kafka.
- Знание систем контроля версий (Git).
- Глубокое понимание СУБД, SQL.
- Плюсом будут опыт работы в Docker, Kubernetes и Python.
Что получат сотрудники?
- Сложную и интересную работу в молодой команде профессионалов.
- Сотрудничество и обсуждение проектов с нашими технологическими партнерами (например, Facebook, Google, Яндекс, ВКонтакте, Amazon).
- Конкурентоспособная зарплата.
- Бесплатные курсы английского языка и социальный пакет.
- Комфортный офис в центре города (м. Полежаевская).
- Скидку на весь ассортимент продукции.