|
|
|
Индексация в поисковых системах
|
Для управления индексацией (например, запрета индексации той или иной страницы) используется файл robots.txt и такие директивы как Disallow, Allow, User-agent, Crawl-delay и другие. Также, для управления индексацией применяют теги <noindex> и <nofollow>, закрывающие содержимое сайта от роботов Яндекса и Google соответственно (Yahoo использует тег <nofollow>).
Индексирование в поисковых системах — процесс добавления сведений (о сайте) роботом поисковой машины в базу данных, впоследствии использующуюся для (полнотекстового) поиска информации на проиндексированных сайтах.
В сведения о сайте чаще всего входят ключевые слова (алгоритм определения ключевых слов зависит от поисковой системы), статьи, ссылки, документы, также могут индексироваться изображения и т. д.
Существуют некоторые ограничения на типы индексируемых данных (java скрипты, flash файлы).
|
| 2010-01-19 | Материал из Википедии |
| <<< Поисковая система | Поисковый алгоритм >>> |
|
 |
|
|
|
| 2010 © UMNO.RU |
|
|
