Прокси grabber

Discussion in 'Безопасность и Анонимность' started by netcat, 1 Aug 2011.

  1. netcat

    netcat New Member

    Joined:
    3 Nov 2010
    Messages:
    3
    Likes Received:
    0
    Reputations:
    0
    Говорят что прокси надо сканить самому, но с сайтов/форумов можно набрать >1000 уникальных рабочих прокси. что вполне хватает для собственных нужд. Но на большинстве сайтов с хорошей валидностью стоит java защита от грабинга.

    Какой прокси граббер работает с наибольшим кол-вом сайтов(напрмер http://www.freeproxylists.net)?

    forum leecher не предлагать т.к. в основном собирает 90% мертвяка.
     
  2. Duman

    Duman Member

    Joined:
    22 Feb 2011
    Messages:
    36
    Likes Received:
    6
    Reputations:
    1
    http://www.proxyfire.net/
    Как вариант ProxyFire в помощь. Мощный инструмент по работе с проксями, сканит по странам, по порту, режет дубликаты...ну и еще куча всяких приблуд.
     
  3. netcat

    netcat New Member

    Joined:
    3 Nov 2010
    Messages:
    3
    Likes Received:
    0
    Reputations:
    0
    Proxyfire да. я его юзаю, но
    1. он этот сайт не берет и некоторые подобные
    2. Глючит иногда. Недавно перестал работать чек прокси на валидность(не понятно что случалось, но уже не один раз такое было). Проксей чекается ничтожно мало(2-10) хотя должно быть около 1000. Думал в судьях дело, добавляю новые - они либо бэд либо вообще не чекаються
    Не знаю в чем дело.

    Может есть еще варианты, или кто то сталкивался с этим?
     
    #3 netcat, 2 Aug 2011
    Last edited: 2 Aug 2011
  4. Наташша

    Joined:
    3 Dec 2009
    Messages:
    25
    Likes Received:
    9
    Reputations:
    0
    Попробуй ProxyGrab 0.6
    Достаточно удобная штука, изначально достаточно тормозная, но в зависимости от настроек(timeout = 4-5) и (retries=1) , можно значительно ускорить процесс!
    Собирает тщательно, параллельно отсеивая дубликаты


    ProxyFire ? Отсылает.