Отзыв научного руководителя на выпускную квалификационную работу Марцинковской Натальи Алексеевны на тему: «Исследование A/B-тестов в разработке мобильных игр» Направление: 02.03.01 “Математика и компьютерные науки” Основная образовательная программа СВ.5152.2019 “Математика, алгоритмы и анализ данных” В игровой индустрии при проведении A/B-тестов можно столкнуться с рядом проблем, которые могут осложнить их проведение и получение правильных результатов. Это связано с тем, что необходимо быстро получать и обрабатывать данные, чтобы реагировать на поведение игроков и внедрять изменения в продукт в реальном времени. В таком случае данных получается мало и нередко значимая разница в экспериментах отсутствует. Поэтому очень важно грамотно использовать A/B тесты, а в некоторых случаях и вовсе отдать предпочтение другим методам аналитики. В своей работе Наталья исследовала применимость используемых статистических тестов и выявила недостатки в текущем процессе A/B тестирования. Натальей также были предложены альтернативные методы анализа данных, которые могут быть полезны в ситуации, когда данные уже есть и проводить A/B-тесты нет возможности. Кроме того, в ходе исследования были выявлены ситуации, в которых использование A/B-тестов не является необходимым. В процессе совместной работы Наталья показала целеустремленность, заинтересованность в решении поставленных задач и знания в области математической статистики и машинного обучения. Считаю, что данная выпускная квалификационная работа заслуживает оценки «отлично», а Наталья – присвоения степени бакалавра по направлению “Математика и компьютерные науки”. А.Ю. Авдюшенко, Доцент факультета МКН СПбГУ, к.ф.-м.н. 5 июня 2023г.