Общие > Веб Сервера

Индексация поисковиками

(1/1)

RelaX:
Здравствуйте!
как можно по логам web-сервера определить, когда была произведена индексация сайта поисковыми роботами? в частности интересует яндекс и рамблер.
Может что-то обое пишется в логах?

alex007:
RelaX
Agent: Rambler или Yandex

Greg:
alex007
иногда поисковики меняют агентов, чтобы черные оптимизаторы не смогли этим воспользоваться

StarLey:
А как они ими могут воспользоваться?

Yukko:
StarLey, отдавать поисковику и пользователю абсолютно разный контент.
http://wiki.searchengines.ru/WikipediaSEO/PoiskovyjjSpam/Kloaking?v=3wq

Навигация

[0] Главная страница сообщений