Вакансия: Data Engineer

Компания: SConsulting

Город и адрес офиса: удаленка (без ограничений: пол, возраст, здоровье)

Локации: СНГ/Весь мир. Москва (UTC+03:00, Europe/Moscow) ± 2 ч

Занятость и формат работы: part-time/full-time/remote

ЗП: от 250 000 до 290 000  

Приглашаем Data Engineer - эксперта, специализирующегося на data-продуктах – хранилищах данных, платформах данных (YDL/ADL).

Обязанности:

Построение цепочек загрузки и трансформации данных и промежуточных витрин данных в Yandex Data Lake:

— выявление существующих цепочек трансформации данных, используемых для отчетов в текущих DWH - SAP BW и Azure DL;

— создание аналогичных потоков трансформации данных в Yandex DL;

— создание промежуточных витрин данных для последующего построения отчетов;

— оптимизация цепочек загрузки и трансформации данных (при наличии такой возможности) в новом DWH;

— создание технической документации для дальнейшей поддержки нового DWH, цепочек загрузки/трансформации данных, промежуточных витрин данных;

Требования:

— Опыт работы в области управления и обработки данными от 3 лет;

— Профессиональное владение SQL;

— Более двух лет практического опыта работы с Python, Spark;

— Опыт работы с технологиями на основе Hadoop (HDInsight, Spark, Hive, Pig, Scala и т. Д);

— Обширный опыт работы с инструментами ETL, такими как Azure Data Factory, SSIS, Pentaho и т.д.;

— Обширный опыт работы с технологиями хранения Azure и Yandex;

— Практический опыт использования инструментов управления конфигурацией и автоматизации, таких как Azure DevOPS, Ansible, DSC, Puppet, Chef, Salt и т.д.

‍

Мы предлагаем:

— Оформление в соответствии с требованиями законодательства РФ;

— Конкурентный уровень зарплаты с индексацией;

— Карьерный и профессиональный рост;

— Работа в стабильной компании;

— Дружелюбный процесс интервью с заказчиком;

— Комфортные условия удалённой работы в дружном и сплочённом коллективе;

— Чётко выстроенные процессы;

— Культура наставничества и сильная техническая экспертиза в команде;

— Проекты внедрения в крупнейших компаниях России.

— Удаленная работа.