Цифровизация в лингвистике

Генеративная грамматика

Изучение гипотетической врожденной структуры языка

Когнитивная грамматика

Гипотеза, что грамматика, семантика, лексика существует в континууме, а не как отдельные процессы в целом

Рассмотрение когнитивных аспектов языковых явлений

Описание лексикона и синтаксиса

Функционалистическая теория

Бихевиористская теория

Изучение универсальных категорий языка.

Сферы применения

Машинные переводы с одного языка на другой

Интернет-магазины, социальные сети, чат-боты

Генерация текстов, например, написание стихов.

Принцип действия

Прямой проход(feed forward)

Обратный проход(backward)

Структурированные данные

Имеющие связанную с ними структуру таблиц и отношений

Хранящаяся в СУБД информация, файлы CSV или таблицы Excel.

Полуструктурированные данные

Данные не соответствуют строгой структуре таблиц и отношений

Имеют другие маркеры для отделения семантических элементов и обеспечения иерархической структуры записей и полей

Неструктурированные данные

Не имеют никакой связанной с ними структуры, либо не организованы в установленном порядке