Белые методы раскрутки Google игнорирует robots.txt?

Discussion in 'SЕО - тонкости, методы раскрутки' started by swordfishik, 6 Aug 2010.

  1. swordfishik

    swordfishik New Member

    Joined:
    9 Sep 2009
    Messages:
    151
    Likes Received:
    1
    Reputations:
    0
    Всем привет. Вот скажите мне, какого х*я Google игнорирует правила robots.txt? Он задолбал добавлять страницы в поиск, которые я принудительно закрыл.
    Вот мой robots.txt- _http://www.danler.com.ua/robots.txt.
    Страницы в поиске которых не должно быть:
    ***/addtocart.php
    ***/cart/
    и тд
    Ну какого? :mad:
     
  2. DesCent

    DesCent Banned

    Joined:
    9 Jul 2010
    Messages:
    276
    Likes Received:
    51
    Reputations:
    16
    Ха, за гуглом такое не впервые замечают. По юзер-агенту запрещаешь доступ?
     
  3. zarkon

    zarkon Elder - Старейшина

    Joined:
    22 Nov 2006
    Messages:
    403
    Likes Received:
    98
    Reputations:
    76
    попробуй добавить Disallow: /User-agent: Googlebot
    так же
    есть еще один момент .. если прописал роботс после того как он взял их в индекс он может их и не выкинуть.. поэтому роботс надо делать сразу..
    напиши в гугл об удалении данных директорий из выдачи...

    upd
    СТОП ! А где ты видишь в индексе эти документы ???
    http://www.google.com.ua/search?hl=ru&q=site:www.danler.com.ua&aq=f&aqi=&aql=&oq=&gs_rfai=
     
    #3 zarkon, 6 Aug 2010
    Last edited: 6 Aug 2010
  4. swordfishik

    swordfishik New Member

    Joined:
    9 Sep 2009
    Messages:
    151
    Likes Received:
    1
    Reputations:
    0
    Disallow: /User-agent: Googlebot - прописать где именно, чтобы корректно было?
    роботс был сразу добавлен, аж потом послан сайт на индексацию
    во второй выдаче - http://www.google.com.ua/search?q=site:www.danler.com.ua&hl=ru&filter=0
    ***/addtocart.php я заблокировал таким путем Disallow: /*.php
     
  5. swordfishik

    swordfishik New Member

    Joined:
    9 Sep 2009
    Messages:
    151
    Likes Received:
    1
    Reputations:
    0
    .........
     
    #5 swordfishik, 9 Aug 2010
    Last edited: 9 Aug 2010
  6. Dimi4

    Dimi4 Чайный пакетик

    Joined:
    19 Mar 2007
    Messages:
    750
    Likes Received:
    1,046
    Reputations:
    291
    да да, я молчу, скули от ныне бестолковые, а мд5 вообще не поддается бруту. да и вправду, толку то, узнаю я пасс, получу доступ к админке и что..
     
    2 people like this.
  7. zarkon

    zarkon Elder - Старейшина

    Joined:
    22 Nov 2006
    Messages:
    403
    Likes Received:
    98
    Reputations:
    76
    дык что ты с этого поимеешь ? ну взял пасс. ну сбрутил... что дальше ? будешь зальеш шелл .. получишь доступ к серваку .. максимум продашь как деда..

    upd// хотя ..все же ты прав.. но я все же сомневаюсь что особо кто то будет урлы отсюда выгребать целей и так много ...