Разработчик Hadoop в Неофлекс
Обязанности
Определение источников, выявление проблем с качеством данных в источниках;
Разработка схем данных конечных витрин в Hive по утвержденному проекту;
Маппинг атрибутов источников на приёмник;
Разработка ETL-процессов с помощью внутреннего фреймворка;
Реконсиляция данных, написание базовых тестов на качество данных.
Требования
- Готовность к офисному формату работы 5/2;
- Уверенный уровень sql (в пределах стандарта, без привязки к СУБД);
- Представления о java / python( иногда приходится писать фрагменты кода - как обертку над sql);
- Желательно:
- представление о BigData: Hive, Spark;
- представление об оркестраторах: oozie, Airflow;
- умение работать с Confluence;
- иметь представление о работе с Jira, Git.
Условия
- Официальное трудоустройство по ТК РФ;
- Амбициозные задачи и проекты;
- Работа в команде профессионалов в доброжелательной атмосфере;
- Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.), а также возможность страхования родственников по корпоративной цене;
- Корпоративное обучение и развитие (портал обучения и развития удаленным доступом 24/7; собственный Центр развития компетенций);
- Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.