Вообщем делаю сейчас сайт, в виду его некой специфичности не хотелось бы чтоб он был проиндексирован поисковиками *в идеале любыми* но так же чтоб и не был в бане, так как в дальнейшем спустя некоторое время его всё же хочется поменять специфику сайта и вкинуть в индекс, уже видно что сайт найден гуглом и яшей. Как запретить индексацию сайта и сделать его невидимым для поисковиков \\ на сайте присутствует форум, тикет система, блог\\ * работа\продвижение сайта как и раскрутка будет только в виде сарафанного радио, прямого указания адреса* . *возможно вопрос глупый и боян, но собсно.. сабж*
так же можно закрыть страницы в шаблоне в тег noindex. если страницы уже в индексе можно отправить заявку на исключения сраниц из индекса так ж есть способ запрета роботам посещать сайт через трек юзер агента на на самом серваке.. но подробней сказать не могу не использовал ...
Disallow в robots.txt. Замечено что в таком случае боты всё равно будут лазить по сайту. Если это не нравится, можно в .htaccess сделать фильтр по юзерагенту известных ПС.