Научно-исследовательский семинар "Трансформеры"

2024/2025

Учебный год

RUS

Обучение ведется на русском языке

Кто читает:

Базовая кафедра ПАО Сбербанк «Финансовые технологии и анализ данных»

Статус:

Курс по выбору

Когда читается:

2-й курс, 1 модуль

Программа дисциплины

Аннотация

Обзор современных трансформерных архитектур, погружение в схему работы механизмов внимания (attention), анализ сильных и слабых сторон, разбор различных типов моделей (энкодеры, декодеры, энкодеры-декодеры), типов задач. Анализ последних работ по модификациям архитектур трансформеров, разбор деталей обучения моделей.