Современные методы и средства построения систем информационного поиска. Лекция 10. Особенности веб-поиска. Спайдер. Романенко Алексей

Романенко Алексей рассказывает об особенностях веб-поиска.

1. Популярность пользования поиска
2. Веб без поисковых систем?
3. Немного истории
4. Основы веб-поиска
5. Потребности пользователей
6. Как далеко заходят пользователи?
7. Эмпирическая оценка пользователем результатов
8. Эмпирическая оценка пользователем ПС
9. Коллекция Веб-документов
10. Какого размера Веб
11. Новое определение
12. Первое поколение поисковой рекламы: Goto (1996)
13. Как ранжируется реклама
14. Search ads: есть и минусы
15. Основные задачи спайдера
16. Все ли так просто
17. Что любой спайдер должен делать
18. Очередь урлов
19. Выполнение шагов при выкачки
20. Основная архитектура спайдера
21. DNS
22. Фильтры и robot.txt
23. Спайдеры
24. Хранение документов
25. Поиск блоков с контентом
26. Удаление шума