Всем привет. Последние пару дней начал замечать, что дополнительный индекс страниц на белом сайте начал расти, тобишь гугл начал активно индексировать страницы, которые запрещены в robots.txt . В роботс я недели три назад закрывал ненужные каталоги и отдельные страницы, но за последние 2-3 дня сопли увеличились, с чем это может быть связано? Яндекс к примеру всё правильно индексирует, а вот гоша чтото из ума выжил
видит и всегда видел. Возник еще вопрос, у меня есть страница http://site.ru/page1/ я когда то давно менял урл и теперь эта страница доступна по адресу http://site.ru/page2/ . Если перейти на http://site.ru/page1/ то редиректит на http://site.ru/page2/ , редирект не 301 точно(хз какой, проверял сервисом, пишет что страница не доступна). Если я в вебмастере гугла удалю http://site.ru/page1/ , страница http://site.ru/page2/ не пострадает? дело в том, что http://site.ru/page1/ висит в соплях гугла. Как быть? Sitemap _______ Тип _______ Загружено URL отправлены URL в интернет-индексе /sitemap.xml __ Sitemap________ 17.03.2011________ 72 ______________ 0 /sitemap.xml.gz Sitemap________ 21.03.2011 ________ 74 _____________ 70 WTF? первый раз такие чудеса наблюдаю(
даже не знаю, хорошо ли то что я удалил сопли гугла. как видим, позиции в плюсе, но не все. Зато трафа стала меньше на 30%. Я еще понаблюдаю и отпишусь тут, вдруг кому пригодится.
Дабы не создавать новую тему! Скажите, какого члена гугл индексирует сайт полностью закрытый от индексации? сайт полностью новый.