Программирование и лингвистические данные

Бакалавриат 2022/2023

Лучший по критерию «Полезность курса для Вашей будущей карьеры»

Лучший по критерию «Полезность курса для расширения кругозора и разностороннего развития»

Статус: Курс обязательный (Фундаментальная и компьютерная лингвистика)

Направление: 45.03.03. Фундаментальная и прикладная лингвистика

Кто читает: Школа лингвистики

Где читается: Факультет гуманитарных наук

Когда читается: 1-й курс, 1-4 модуль

Формат изучения: без онлайн-курса

Охват аудитории: для своего кампуса

Преподаватели: Аксенова Анна Александровна, Бузанов Антон Олегович, Евстратенко Богдан Сергеевич, Ершова Елизавета Олеговна, Казакова Татьяна Борисовна, Лабенская Яна Амировна, Ляшевская Ольга Николаевна

Язык: русский

Кредиты: 4

Контактные часы: 82

Полная версия программы учебной дисциплины Задать вопрос

Аннотация

Целями освоения дисциплины «Программирование и лингвистические данные» является получение теоретических знаний и практических навыков использования различного компьютерного инструментария в лингвистических исследованиях. Блок «Программирование» посвящен изучению основ программирования на языке Python, алгоритмов, регулярных выражений. Блок «Лингвистические данные» знакомит слушателей с основными компьютерными инструментами и электронными лингвистическими ресурсами, с методами автоматизации сбора, обработки и анализа лингвистического материала, а также со способами представления данных и результатов исследований в виде компьютерных ресурсов.

Цель освоения дисциплины

Овладение навыками программирования на языке Python
Овладение навыками применения регулярных выражений при работе с текстом
Получение опыта применения языка Python для решения задач, возникающих при автоматической обработке текстов

Планируемые результаты обучения

Знать основные конструкции языка Python
знать основные типы лингвистических ресурсов
Знать особенности изменяемых и неизменяемых типов данных
Знать синтаксис и особенности работы регулярных выражений
иметь представление об основных форматах представления текста, кодировке текста
иметь представление, какие типы лингвистической информации и какие уровни описания языка отражает лингвистический ресурс
Уметь выполнять основные операции с использованием регулярных выражений: поиск, замена, разделение
уметь выполнять основные операции с текстовыми данными (сортировки, фильтрация, индексирование, выделение подстроки, сводные таблицы)
Уметь запускать программы на Python в командной строке и интерактивном интерпретаторе Python
Уметь искать и устанавливать модули с помощью pip
Уметь использовать готовые модули в своих программах
Уметь писать функции и тестировать их работу
уметь пользоваться инструментами разметки корпуса (ELAN, UDpipe, акцентуаторы)
Уметь пользоваться модулем collections для задач подсчета и подобных им
уметь пользоваться полнофункциональными текстовыми и табличными редакторами
уметь пользоваться различными типами поисковых корпусных систем
Уметь преобразовывать строки в различные типы данных
Уметь применять словари и списки для работы с данными
Уметь производить основные операции с файлами: чтение, запись, изменение
Уметь производить основные операции с файловой системой: поиск файлов и директорий, получение содержимого директории, обход директорий, копирование и перемещение файлов и папок
Уметь работать с модулем re
Уметь разделять программу на релевантные функции
уметь размечать пользовательские корпусные данные на различных лингвистических и текстовом уровнях
Уметь решать прикладные задачи с применением условных конструкций
Уметь решать прикладные задачи с применением условных конструкций и циклов
Уметь решать прикладные задачи с применением циклов
уметь собирать и корректно интепретировать частотную информацию из корпуса