по России
з/п не указана
2 год назад
Наш отдел Data Warehouse занимается построением консолидированного хранилища данных для решения ключевых задач бизнеса в аналитике, маркетинге и отчётности. Нам нужен талантливый и энергичный руководитель с опытом в сфере построения хранилищ больших данных, который будет помогать команде строить процессы работы с данными, чтобы эффективно и оперативно решать задачи бизнеса
Обязанности
- Следить за критичными показателями сервисов и оперативно устранять аварии
- Помогать разработчикам решать системные проблемы их сервисов, настраивать инфраструктуру и системы мониторинга
- Проектировать архитектуру сервисов и предлагать свои решения
- Автоматизировать рутинные задачи, создавать инфраструктуру для решения новых классов задач
Требования
- Работали с Unix и консолью, будет здорово, если владеете AWK
- Понимаете, как пользовательские приложения взаимодействуют с операционной системой: знакомы с системными вызовами, процессами, тредами
- Понимаете, как устроены сетевые протоколы
- Занимались диагностикой: интерпретировали вывод ps, top, strace, perf, tcpdump
- Программируете на Python или хотите этому научиться
Условия
- Наш стек технологий:
- YT — MapReduce-система Яндекса, аналог Hadoop
- YQL — диалект SQL для YT, аналог Hive
- Python — основной язык для написания трансформаций
- Spark-подобный фреймворк для YT
- ClickHouse
- DataLens и Tableau