Бакалавриат 2024/2025

Теория и практика онлайн-экспериментов

Статус: Курс по выбору (Прикладная математика и информатика)

Направление: 01.03.02. Прикладная математика и информатика

Кто читает: Департамент больших данных и информационного поиска

Где читается: Факультет компьютерных наук

Когда читается: 4-й курс, 3 модуль

Формат изучения: без онлайн-курса

Охват аудитории: для всех кампусов НИУ ВШЭ

Язык: русский

Кредиты: 4

Программа дисциплины

Аннотация

В рамках данного курса студенты узнают о том, что такое онлайн-эксперименты, зачем их проводить, как их проводить, а также детально пройдут теорию, которая стоит за онлайн-экспериментами. На курсе мы постараемся обсудить интуицию, которая стоит за всеми статистическими методами, используемыми в А/Б тестах и других задачах, где мы пытаемся сравнить две сущности.

Цель освоения дисциплины

• Знать и понимать статистические основы стоящие за онлайн-экспериментами
• Знать и понимать что такое онлайн-эксперименты
• Знать, понимать как ускорить эксперимент и уметь их ускорять

Планируемые результаты обучения

• Уметь проводить онлайн эксперименты
• Уметь проводить эксперимент в нестандартной постановке

Содержание учебной дисциплины

• Лекция 1
• Лекция 2
• Лекция 3
• Лекция 4
• Лекция 5
• Лекция 6
• Лекция 7
• Лекция 8
• Лекция 9

Элементы контроля

• Домашнее задание
  Состоит из 6 задач по темам 2-3 лекции, то есть по построению оценок параметров, доверительных интервалов и проведению статистических тестов.
• Контрольная работа
  КР проводится в письменной форме в Zoom. Камера должна быть включена, экран должен быть записан. Во время написания пользоваться любыми материалами запрещено.
• Экзамен
  Экзамен проводится в письменной форме в Zoom. Камера должна быть включена, экран должен быть записан. Во время написания пользоваться любыми материалами запрещено.

Промежуточная аттестация

• 2024/2025 3rd module
  0.4 * Домашнее задание + 0.4 * Контрольная работа + 0.2 * Экзамен

Список литературы

Рекомендуемая основная литература

• Burk, S. (2006). A Better Statistical Method for A/B Testing in Marketing Campaigns. Marketing Bulletin, 17, 1.

Рекомендуемая дополнительная литература

• Kohavi, R., Longbotham, R., Sommerfield, D., & Henne, R. M. (2008). Controlled experiments on the web: survey and practical guide. Data Mining and Knowledge Discovery ; Volume 18, Issue 1, Page 140-181 ; ISSN 1384-5810 1573-756X. https://doi.org/10.1007/s10618-008-0114-1

Авторы

• Кононова Елизавета Дмитриевна
• Багиян Нерсес Карленович