ETL разработчик

Наша команда развивает Data-driven подход, собранные данные применяем для машинного обучения и аналитики. Меняем классический ритейл в digital. Мы гибкие. У нас высокая скорость принятия решений и полностью горизонтальная структура. Мы не говорим Big Data - говорим Data Value; не Batch, а Streaming. Не Legacy, а Open Source. Не OnPremise, а Cloud. Стек технологий: Nifi, Spark, Kafka, Greenplum, S3.

Обязанности:

∙ Создавать и улучшать процессы обработки данных
∙ Разрабатывать схемы подключения новых источников в DataLake
∙ Принимать участие в архитектурных решениях
∙ Разрабатывать процедуры формирования детального слоя данных и слоя витрин DataLake
∙ Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных (Grafana, Graphite)
∙ Писать manual и automated DQ тесты
∙ Документировать свою работу в Confluence

В работе Вам пригодятся:

∙ Знания принципов работы БД, построения ХД
∙ Опыты работы разработки ETL процессов (SSIS, NiFi, Pentaho, Informatica)
∙ Опыт работы с высоконагруженными распределенными системами хранения и обработки данных (Hadoop, MPP)
∙ Отличное знание SQL, опыт оптимизации запросов
∙ Опыт разработки на Python/Scala или Java

Мы предлагаем:

• работу в стабильной компании-лидере DIY рынка с уникальной корпоративной культурой;
• участие в конференциях вместе с нашей международной командой (Россия, Франция, Испания, Бразилия);
• возможности для профессионального развития и изучения иностранных языков;
• белую заработную плату и систему премирования;
• ДМС и социальный пакет;
• компенсацию питания и мобильной связи.