Поиск видео по текстовому запросу для базы коротких видео

ФИО студента: Кириллова Анастасия Павловна

Руководитель: Наумов Алексей Александрович

Кампус/факультет: Факультет компьютерных наук

Программа: Математика машинного обучения (Магистратура)

Год защиты: 2024

Поиск видео по тексту - это задача ранжирования видео в базе видеоданных в зависимости от их соответствия заданному текстовому запросу. Современные методы основаны на модели CLIP, адаптируя контрастный лосс для выравнивания видео и текста и дальнейшего использования в дополнительных функциях потерь для улучшения мультимодальной выравненности. В этой работе целевой домен - база данных коротких видеороликов. Был широко изучен пайплайн аугментации, и представлена стратегия инициализации видеоэнкодера, показавшаяся более хорошее качество. Была выбрала наилучшая конфигурация модели и при этом эффективность работы была одним из важнейших факторов. Был проведен анализ обучающих наборов данных, и модель была обучена на наилучшем наборе данных. Обученная модель протестирована на нескольких тестовых датасетах и сравнена с другими алгоритмами.

Выпускные квалификационные работы (ВКР) в НИУ ВШЭ выполняют все студенты в соответствии с университетским Положением и Правилами, определенными каждой образовательной программой.

Аннотации всех ВКР в обязательном порядке публикуются в свободном доступе на корпоративном портале НИУ ВШЭ.

Полный текст ВКР размещается в свободном доступе на портале НИУ ВШЭ только при наличии согласия студента – автора (правообладателя) работы либо, в случае выполнения работы коллективом студентов, при наличии согласия всех соавторов (правообладателей) работы. ВКР после размещения на портале НИУ ВШЭ приобретает статус электронной публикации.

ВКР являются объектами авторских прав, на их использование распространяются ограничения, предусмотренные законодательством Российской Федерации об интеллектуальной собственности.

В случае использования ВКР, в том числе путем цитирования, указание имени автора и источника заимствования обязательно.

Реестр дипломов НИУ ВШЭ