Управляем поисковыми роботами

25.10.12 //

Во время индексации веб-ресурса на поведение роботов ПС можно оказывать влияние различными методами. Они бывают полезными и нет, эффективными и не очень. Сделать это можно такими инструментами:
Разрешением явного характера на индексацию определенных страниц посредством robots.txt;
Наложением запрета на проведении индексации страниц веб-ресурса, опять-таки посредством файла robots.txt;
За счет закрытия для индексации некоторых частей страниц веб-ресурса посредством использования тэга «NOINDEX». Обязательно изучите советы по оформлению электронных презентаций.
Здесь отметим, что БД всех без исключения ПС обновляются в режиме он-лайн. Данное стает причиной того, что число страничек в индексе меняется в режиме он-лайн либо в направлении увеличения, либо в направлении уменьшения их количества. Одной среди наиболее важных причин, которые убирают страницу из индекса, является попытка обратиться к странице в тот момент, когда она является недоступной. После восстановления работоспособности сервера отдельные странички и веб-ресурс в целом снова появляются в индексе. К тому же чем большее количество внешних ссылок ведет на сайт, тем быстрее происходит процесс его индексации.
Для самостоятельного контроля за индексацией веб-ресурса можно проанализировать лог-файлы, которые содержат информацию о визите ПС.




Комментарии: 0

Никто пока не оставлял комментариев.

Оставить комментарий