АвитоData Scientist · Работа в сфере IT - технологий
Data Scientist в команду автомодерации
в Москве и МОПолная занятость
Москва
Отклик ведёт на проверенную страницу отклика
О компании
Мы — команда Automated Moderation в юните «Автомодерация» направления Trust & Safety. Развиваем инструменты доверия и безопасности на платформе: помогаем проверять контент и снижать риск появления материалов, которые нарушают правила Авито.Мы разрабатываем и поддерживаем ML-систему проверки объявлений: анализируем текст, фото и параметры, автоматизируем проверки и снижаем нагрузку на ручную модерацию.Основной проект — развитие LLM-модерации, около 80% рабочего времени. Система уже работает в продакшене: классические модели находят потенциальные нарушения, а LLM проверяют их по правилам Авито. Мы улучшаем промпты, дообучаем LLM- и VLM-модели, автоматизируем эксперименты с помощью AI-агентов.Ищем DS-инженера полного цикла, который будет вести решения от постановки задачи и работы с данными до инференса, мониторинга и оценки влияния на продукт. Помимо основного проекта, будут задачи автомодерации с текстом, изображениями и видео.
Требования
умеете проводить полный цикл ML-разработки: от работы с данными и моделью до продакшена, мониторинга и проверки влияния с помощью A/B-тестов или эквивалентных подходов;
имеете большой опыт в NLP или значимый опыт вывода и сопровождения моделей в продакшене;
работали с LLM в прикладных задачах и умеете проверять качество решений на данных;
дообучали LLM и VLM, работали с LoRA, PEFT и оптимизацией инференса, например с vLLM;
уверенно владеете Python и DS-стеком: NumPy, pandas, scikit-learn, CatBoost или аналогами, умеете работать с DL-фреймворками, например PyTorch;
понимаете, как выбирать методы под задачу и аргументировать компромиссы между качеством, стоимостью, скоростью и рисками;
умеете оценивать качество моделей при запуске и отслеживать его изменение во времени: дрейф, деградации, проблемы данных;
пишете SQL-запросы на уровне, достаточном для анализа данных и диагностики качества;
читаете англоязычную техническую литературу.
Будет плюсом
имеете опыт в модерации, Trust & Safety или антифроде;
разрабатывали инструменты для AI-агентов, MCP-серверы или автоматизировали с их помощью ML-процессы;
знакомы с практиками MLOps: Kubeflow, K8s, feature store, MLflow;
настраивали мониторинг и алерты в Grafana, участвовали в A/B-тестах и канареечных релизах;
использовали LLM в прикладных задачах;
работали с CV или мультимодальными задачами, например VLM.
Обязанности
развивать LLM-проверки: переводить регламенты модерации в инструкции для моделей, разбирать ошибки и улучшать качество решений;
строить воспроизводимые эксперименты: сравнивать модели, промпты, состав входных данных и пороги принятия решений;
применять и развивать автоматическую оптимизацию промптов, дообучать модели и LoRA-адаптеры там, где это оправдано качеством и стоимостью;
готовить датасеты: организовывать сбор и разметку, проверять качество данных и репрезентативность выборок;
встраивать решения в пайплайны автомодерации и обеспечивать стабильную работу в продакшене: учитывать качество, задержки, вычислительную стоимость и риски ошибок;
настраивать мониторинг качества и деградаций, алерты и регулярные итерации улучшений;
оценивать влияние решений на продуктовые и бизнес-метрики.
Условия
масштабный инженерный процесс, где вы можете участвовать во всех этапах работы над ML-решением;
интересные развивающие задачи и влияние на продуктовые и бизнес-метрики;
культура взаимопомощи и обмена опытом;
прозрачный карьерный трек и инструменты для роста: семинары, менторство, митапы;
расширенная забота о здоровье: ДМС, страхование жизни, онкострахование;
сервис психологической поддержки, а также финансовые, юридические и ЗОЖ-консультации для вас и ваших близких;