Архив: Data engineer/ ETL developer

По итогам собеседования
QuadcodeQuadcode, Санкт-Петербург, можно удалённо, опыт от 1 до 3 лет, full-time

Quadсode — это международная IT-компания, разрабатывающая программное обеспечение для индустрии трейдинга и инвестиций. Наши клиенты — это компании-брокеры и финансовые организации.

Мы имеем 7-летний опыт — и за это время 50 млн. трейдеров оценили преимущества наших продуктов.

Команда в России — это 450+ человек, из которых 55% – технические специалисты. Всего в группе компаний 750+ человек в 5 странах (Россия, Кипр, Англия, Австралия и Гибралтар).

Обязанности:

  • реализация потокового компонента загрузки данных в HDFS хранилище;
  • реализация батчевого обработчика для соблюдения GDPR (очистка истории пользователя);
  • реализация потокового компонента загрузки данных в ODD слой хранения Greenplum;
  • написание ETL процедур сбора/очистки данных.

Требования, необходимые навыки

  • владение одним или несколькими языками программирования для написания ETL процедур (Python, Scala/Java, Golang);
  • понимание принципов создания и работы распределенных систем;
  • опыт разработки batch/streaming приложений;
  • опыт с реляционными СУБД (Greenplum,PostgreSQL);
  • навык оптимизации SQL запросов;
  • опыт работы hadoop экосистемой (HDFS, Hive, Flink);
  • опыт работы с брокерами сообщений (Apache Kafka);
  • опыт работы с NoSQL БД (Apache Cassandra);
  • навыки работы с OS Linux на уровне уверенного пользователя;
  • опыт работы с Docker и инструментами упаковки и выкладки приложений (Gitlab/Jenkins CI, Helm, Artifactory);
  • знание принципов работы сетевых протоколов (TCP/UDP, HTTP,ICMP etc.).

Условия:

  • соблюдаем все требования ТК РФ;
  • полностью белая зарплата;
  • офис расположен в 10 минутах ходьбы от ст.м. Новочеркасская в бизнес-центре класса А+;
  • компенсируем стоимость обедов;
  • ежедневно пополняем холодильники на каждом этаже вкусной и разнообразной едой;
  • ДМС (включая стоматологию);
  • оплачиваем корпоративный спортзал с личным тренером и спортивные секции (футбол, баскетбол, волейбол).

Что мы предлагаем:

  • регулярные корпоративные тренинги с внутренними и внешними спикерами;
  • коллектив крутых разработчиков и развитую систему обмена опытом внутри компании;
  • интересные проекты и сложные задачи;
  • необходимость нетривиального подхода и работу над нестандартными решениями;
  • прозрачную систему роста внутри компании;
  • курсы английского языка.

Иногородним кандидатам:

  • предоставление места проживания за счет компании в первый месяц работы;
  • компенсируем стоимость проезда до Санкт-Петербурга;
  • помогаем в оформлении документов (для иностранных граждан).
К сожалению, отклики на эту вакансию уже не принимаются. Возможно, компания нашла подходящего кандидата или позиция потеряла актуальность.