Data Engineer/ Инженер данных
Прямой работодатель Газпром нефть ( www.gazprom-neft.ru )
Опыт работы от 1 года до 3х лет
Мы будем очень рады приветствовать в нашей молодой и растущей команде внимательного и педантичного data-инженера! Ты будешь заниматься исследованием и интеграцией данных из разных источников в платформу, которая объединяет все сведения о работе компании, включая IoT-данные процессов добычи и транспортировки, сейсмологические и др. данные. От тебя будет зависеть проверка их качества и загрузка в платформу. Если ты опытный специалист в SQL и работе с базами данных, имеешь опыт построения ETL и опыт разработки хранилищ данных – добро пожаловать на борт!
Ты будешь:
- разрабатывать ETL-процессы для интеграции данных из систем-источников (архивная, инкрементальная, real-timeзагрузка),
- разрабатывать интеграционные решения для подключения систем-источников данных,
- строить новые и оптимизировать существующие витрины данных,
- интегрировать существующую инфраструктуру с различными сервисами через API,
- участвовать в процессе проектирования и разработки DWH.
Мы ожидаем, что ты:
- знаешь теорию баз данных (RDBMS, MPP), принципы построения DWH (bottom-up, datavault), теорию ETL и ELT,
- знаком со стеком Hadoop (в т.ч. Hive),
- знаком с Kafka, NiFi,
- понимаешь как оптимально хранить данные, чтобы их было удобно и быстро анализировать,
- обладаешь глубоким знанием SQL на уровне написания и оптимизации сложных запросов,
- имеешь базовые знания одного из языков программирования (Java, Python),
- имеешь практический опыт построения DWH, опыт работы с СУБД Greenplum и с одним из BI инструментов (Qlik, Tableau, PowerBI, Cognos).
Будет плюсом опыт написания ETL на Informatica PowerCenter или BDM, опыт работы c NiFi, Spark, Airflow.
С нас:
- работа в стабильной, динамично развивающейся компании,
- годовой бонус,
- конкурентная зарплата,
- работа в офисе класса А с бесподобным видом из окна, coffee points, массажными креслами и др.,
- ДМС (со скидками для родственников), страхование жизни,
- сокращенный рабочий день в пятницу,
- корпоративный спорт (футбол, хоккей и т.п.).
Если тебе интересно помочь российской компании стать мировым лидером в энергетической отрасли, ждем твоё резюме!