21.02.2003, 09:50
|
|
|
Banned
Регистрация: Sep 2001
Сообщений: 6,162
|
Запретить определённому роботу индексацию сайта
User-agent: Sidewinder
Disallow: /
Разрешить определённому роботу индексацию сайта
User-agent: WebCrawler
Disallow:
Сорри нет времени, надо бежать уже
|