Не хочется палить домен особо в плане индексации, ибо потом или в бане окажется, или история не такая)
Как можно полностью закрыть домен от индексации ботами?
Заранее спасибо.
в robots.txt
User-agent: *
Disallow: /file.html
Disallow: /papka/
Где, * - указывает что инструкции для всех поисковых систем
Disallow: /file.html – запрещает индексацию файла file.html
Disallow: /papka/ - запрещает индексацию всех файлов папки papka
например
mixlion, я бы не сказал)
ибо просил закрыть весь сайт. Тебе огромное спасибо, а Integral'y маленькое, гг))