Семинар. Обработка текста. HD

Занятие ведёт Антон Астахов. Ссылка на материалы занятия: https://colab.research.google.com/drive/1FHZVU6yJT61J8w1hALno0stD4VU36rit?usp=sharing Серия "Введение в NLP" Часть 1. Введение в NLP: https://youtu.be/d0oV1MZ_KdE Часть 2. Обработка текста: https://youtu.be/Aa-p8ddbxpQ Часть 3. Решение задачи классификации текста: https://youtu.be/ltyWeIPrAVA 00:00 Начало 00:37 Токенизация 02:08 Библиотека Razdel для токенизации 02:58 Библиотека Natasha (хороша для русского текста) 08:48 N-grams 11:04 Стоп-слова 15:17 Стемминг vs Лемматизация 21:12 Part of Speech 23:11 Named entities recognition --- Deep Learning School при ФПМИ МФТИ Каждые полгода мы запускаем новую итерацию нашего двухсеместрового практического онлайн-курса по глубокому обучению. Наборы проводятся в августе-сентябре и январе-феврале. Поддержать канал можно по ссылке https://www.dlschool.org/donate За нашими новостями можно следить здесь: Наш канал в TG: https://t.me/deep_learning_school_news Официальный сайт: https://www.dlschool.org Официальная группа ВК: https://vk.com/dlschool_mipt Github-репозиторий: https://github.com/DLSchool/dlschool ФПМИ МФТИ Официальный сайт: https://mipt.ru/education/departments/fpmi/ Магистратура: https://mipt.ru/education/departments/fpmi/master/ Онлайн-магистратура "Современная комбинаторика": http://omscmipt.ru/ Онлайн-магистратура "Цифровая экономика": http://digec.online/ Лаборатории ФПМИ: https://mipt.ru/education/departments/fpmi/labs/