Поиск — один из важнейших компонентов продукта: много поверхностей, частые изменения, параллельные A/B‑эксперименты. При этом стандартные способы контроля релизов (CI‑тесты, A/B, offline‑оценка) не всегда вовремя и точно ловят неожиданные изменения выдачи.
В докладе представлю историю о том, как в мы auto.ru развивали релизный контроль поискового сервиса: какие подходы работали на разных этапах, где они перестали масштабироваться и к какому решению мы пришли, чтобы реже ломать выдачу при релизах.
Качество и надежность, Тестовая инфраструктура, Оценка качества и метрики
Бэкенд-разработчик, Специалист по данным / Специалист по машинному обучению
Начальный
Scala-разработчик: поисковые и рекомендательные сервисы в auto.ru. Преподаёт в университете ИТМО; увлекается функциональным программированием.
