Алгоритмы интеллектуальной обработки больших объемов данных. Лекция 5. Обработка текстов, Naive Bayers. Анохин Николай

Анохин Николай рассказывает об условной вероятности и теореме Байеса. Говорит о сглаживании и генеративной модели NB и байесовском выводе. Показывает графические модели.

1. Обработка текстов
2. Data Mining vs Text Mining
3. Задачи Text Mining
4. Этапы обработки текста
5. Декодирование
6. Разбиение на токены
7. Стоп-слова
8. Нормализация
9. Стемминг и Лемматизация
10. Стемминг
11. Heap’s law
12. Представление документов
13. Zipf’s law
14. Задача
15. BoW & TF – IDF
16. Naive Bayes
17. Байесовый классификатор
18. Naive Bayes
19. Варианты NB
20. Обучение NB
21. Применение Multinomial NB
22. Задача
23. Сглаживание
24. Байесовские сети
25. Итоги
26. Определение языка текста