Yandex Parser by Me

Discussion in 'SЕО - тонкости, методы раскрутки' started by napas_hd, 25 Feb 2010.

Page 1 of 3
  1. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    Новая версия, работает через yandex.ru
    35 пост
    ​


    Вчера понадобилось вытянуть выдачу Яндекса, погуглив на тему парсеров ничего рабочего не нашел, пришлось писать свой:

    * Возможность задать User Agent
    * Любое количество страниц для обработки
    * Работает через m.yandex.ru

    [​IMG]

    Скачать
     
    #1 napas_hd, 25 Feb 2010
    Last edited: 14 Jan 2011
    8 people like this.
  2. ICQ Hool

    ICQ Hool Elder - Старейшина

    Joined:
    31 Mar 2008
    Messages:
    175
    Likes Received:
    25
    Reputations:
    0
    я думал тут парсер ключевиков, а тут ссылки, зачем они тебе нужны? 0_о
     
    #2 ICQ Hool, 26 Feb 2010
  3. nMonkn

    nMonkn Member

    Joined:
    4 Jan 2010
    Messages:
    16
    Likes Received:
    5
    Reputations:
    0
    А чем тебя магадан не устраивает как парсер кеев?
     
    #3 nMonkn, 26 Feb 2010
  4. acdel

    acdel Elder - Старейшина

    Joined:
    7 Jan 2008
    Messages:
    131
    Likes Received:
    57
    Reputations:
    3
    Парсить беки, например собрать базу каталогов "живых" или еще что) Хотя в олсабе это все есть, но как фри софт пойдет.

    ТС, добавь RU и EN Google, +Yahoo+ список юзерагентов в базу, руками их проставлять гемор)
     
    #4 acdel, 26 Feb 2010
    Last edited: 26 Feb 2010
  5. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    ОК. В следующих версиях учту.
     
    #5 napas_hd, 27 Feb 2010
  6. capslock

    capslock New Member

    Joined:
    25 Sep 2009
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    Молодец! Программка простая, шустрая, небольшой вес! Делает то что надо! +10 :)
     
    #6 capslock, 22 Jun 2010
  7. Ferrari california

    Ferrari california Banned

    Joined:
    17 Mar 2010
    Messages:
    0
    Likes Received:
    16
    Reputations:
    0
    Я отдаю анадырю предпочтение )
     
    #7 Ferrari california, 23 Jun 2010
  8. regnet

    regnet Active Member

    Joined:
    12 Mar 2009
    Messages:
    27
    Likes Received:
    106
    Reputations:
    -5
    ТС какую строку надо вписать что б парсило с yandex.ru а не с yandex.ua ?
     
    #8 regnet, 28 Jul 2010
  9. mff

    mff Elder - Старейшина

    Joined:
    12 Mar 2008
    Messages:
    2,074
    Likes Received:
    701
    Reputations:
    227
    Тис спс, норм прога, только чо она с UA парсит ? regnet +1 нам с .ru нада :)
     
    #9 mff, 31 Jul 2010
  10. HIMIKAT

    HIMIKAT Elder - Старейшина

    Joined:
    12 Jan 2007
    Messages:
    2,707
    Likes Received:
    581
    Reputations:
    403
    Разработка очень хорошая. Мне как раз понадобился подобный софт. А есть еще нечто подобное только для других поисковиков?
     
    #10 HIMIKAT, 1 Aug 2010
  11. mff

    mff Elder - Старейшина

    Joined:
    12 Mar 2008
    Messages:
    2,074
    Likes Received:
    701
    Reputations:
    227
    Прога отвалилась что ли?
    выдает какой то редирект :)
     
    #11 mff, 1 Aug 2010
  12. DiplomatQ

    DiplomatQ Elder - Старейшина

    Joined:
    4 Jun 2008
    Messages:
    48
    Likes Received:
    5
    Reputations:
    1
    ТОже самое
     
    #12 DiplomatQ, 1 Aug 2010
  13. regnet

    regnet Active Member

    Joined:
    12 Mar 2009
    Messages:
    27
    Likes Received:
    106
    Reputations:
    -5
    Там мне и с .юа и с .ру, и я каталога надо, ТС отзовись плиз.
     
    #13 regnet, 1 Aug 2010
  14. Yetisports

    Yetisports Banned

    Joined:
    11 Jul 2010
    Messages:
    147
    Likes Received:
    12
    Reputations:
    17
    Обнови видимо не будет.
    Потому нужно искать аналоги. ;)
     
    #14 Yetisports, 6 Aug 2010
  15. sadist_ua

    sadist_ua Banned

    Joined:
    21 Jul 2010
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    ТС сделай пожалуйста ещё для гугла
     
    #15 sadist_ua, 9 Aug 2010
  16. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    Сейчас посмотрим чего яшка исправил.

    upd:
    Всё вроде бы работает, только каптча иногда вылазит, ставьте побольше таймаут.

    Есть ещё подозрения на куки, но с этим позже разберусь.

    В программе можно указать откуда парсить.
     
    #16 napas_hd, 10 Aug 2010
    Last edited: 10 Aug 2010
  17. Tesson

    Tesson Banned

    Joined:
    27 Dec 2009
    Messages:
    164
    Likes Received:
    43
    Reputations:
    0
    прикольно спс!
     
    #17 Tesson, 13 Aug 2010
  18. HIMIKAT

    HIMIKAT Elder - Старейшина

    Joined:
    12 Jan 2007
    Messages:
    2,707
    Likes Received:
    581
    Reputations:
    403
    Народ, ну что, аналогов никто не подскажет, только для других поисковиков?

    Или может быть ТС что нибудь сообразил бы, если появится свободное время. Думаю многие выразили бы свою благодарность.
     
    #18 HIMIKAT, 22 Aug 2010
  19. airship

    airship New Member

    Joined:
    24 Aug 2010
    Messages:
    4
    Likes Received:
    0
    Reputations:
    0
    Какие еще будут пожелания, кроме разных поисковиков (т.е. + гугл)? Будет не под m-версию, а под нормальную (подозреваю, что нормальная от портативной могут отличаться по выдаче). Есть еще мысль разделить по регионам поиска (под разные города). Нужно? Зачем много юзер-агентов? Просто зашью десяток, рандомом каждый раз будет выбирать. Давно мысль комбайн сделать - парсер ссылок будет первой функцией.
     
    #19 airship, 26 Aug 2010
  20. dilerium2

    dilerium2 New Member

    Joined:
    6 Aug 2010
    Messages:
    42
    Likes Received:
    0
    Reputations:
    0
    posle pervogo parsa proga podoxla
     
    #20 dilerium2, 17 Dec 2010
(You must log in or sign up to post here.)
Page 1 of 3
Language
English (US)
    ANTICHAT ™ © 2001-2027 Antichat Kft.