ОТЗЫВ НАУЧНОГО РУКОВОДИТЕЛЯ на работу обучающегося СПбГУ по магистерской программе «Математическое и информационное обеспечение экономической деятельности» Миннигареевой Лены Рашитовны по теме «Анализ кликовых моделей для повышения качества ранжирования результатов поисковой выдачи» Магистерская диссертация Миннигареевой Лены Рашитовны посвящена задаче моделирования поведения пользователей поисковых систем. Тема исследования является актуальной, поскольку имитационное моделирование пользователей играет существенную роль в понимании последствий внедрения тех или иных алгоритмов для улучшения качества поиска или представления результатов поисковой выдачи. Развитие таких моделей, в конечном счете, помогает сделать процесс поиска необходимой пользователю информации более эффективным. Перед Миннигареевой Л.Р. были поставлены следующие задачи: проанализировать существующие кликовые модели для повышения качества ранжирования поисковой выдачи; выделить признаки, характеризующие поведение пользователей при информационном поиске; рассмотреть различные варианты разделения пользователей на группы; проанализировать влияние кластеризации пользователей на качество предсказываемых кликов, а также оценить возможности использования кликовых моделей для повышения качества ранжирования результатов поисковой выдачи. В работе приведен краткий обзор публикаций с описанием базовых кликовых моделей (Random Click Model, Position-based model, Cascade Model, Click Chain Model и некоторые другие), рассмотрены основные метрики качества информационного поиска, а также подходы к оценке параметров кликовых моделей. Проведены численные эксперименты по оценке эффективности описанных алгоритмов, при этом для численных экспериментов использовались данные, предоставленные компанией Яндекс для Personalized Web Search Challenge. В процессе научно-исследовательской работы над магистерской диссертацией часть результатов была представлена на конференции CPS 2018. Во время работы над магистерской диссертацией студентка показала большую самостоятельность в своих исследованиях. К работе имеются следующие замечания: 1. К сожалению, не приведено сравнение результатов ранжирования поисковой выдачи без использования кликовых моделей и в случае их использования. Таким образом, не представляется возможным в полной мере оценить степень улучшения ранжирования результатов. 2. Излишняя краткость и сжатость. Не все понятия описаны или разъяснены. 3. Недостаточно подробно описаны результаты численных экспериментов. 4. Работе не достает математической точности в формулировках, постановке задач и описании алгоритмов. С учетом отмеченных недостатков, считаю, что Миннигареева Лена Рашитовна заслуживает оценку «удовлетворительно».