Forum Webscript.Ru

Общие => Веб-технологии => Тема начата: advisor от 29 Ноября 2003, 17:16:05

Название: robots.txt vs .htaccess
Отправлено: advisor от 29 Ноября 2003, 17:16:05
Всем известно для чего предназначен файл robots.txt. Но вот вопрос в том сможет ли его проверить паук если я файлом .htaccess запретил браузеру открывать *.txt файлы ?
Название: robots.txt vs .htaccess
Отправлено: alex6999 от 30 Ноября 2003, 00:10:12
ты не браузеру запретил открывать, ты запретил серверу отдавать тхт файлы.

ответ: не сможет