Воропаев Алексей рассказывает о языковых моделях информационного поиска. Говорит про N-граммы и цепи Маркова.
- Цели распознавания языка
- Языковые модели
- Поиск с использованием языковых моделей
- Фундаментальная проблема нехватки данных
- Построение N-грамм
- Метод максимального правдоподобия
- Сглаживание
- Валидация моделей
- Линейное смешение моделей
- Цепь Маркова
- Матрица переходов
- Последовательность состояний
- Скрытые марковские модели
- Три задачи HMM
- Алгоритмы вперёд и назад
- Алгоритмы Витерби, Баума-Уэлша
- Применение НММ Таггер
- Анализ поведения пользователя.