Черные методы раскрутки SMParser II - парсер vesna.yandex.ru

Discussion in 'SЕО - тонкости, методы раскрутки' started by shuba, 11 Apr 2010.

  1. shuba

    shuba Elder - Старейшина

    Joined:
    22 May 2009
    Messages:
    593
    Likes Received:
    129
    Reputations:
    52
    SMParser функционал

    - парсить рандомные и конкретные тематики
    - появились настройки форматирования текста
    - использовать прокси
    - на ходу синонимизировать текст

    Общий вид софтины

    [​IMG]

    Настройки


    Количество текстов - определяет сколько текстов надо спарсить
    Ширина строки - определяет ширину строки текста записываемого в файл
    Пробелы после H1 - если стоит галка "Заголовки текстов", можно указать отступы после них
    Пробелы после P - дефолтная статья имеет три параграфа, здесь можно указать их отступы
    пробелы после текста - пробелы после текста ))
    Заголовки текстов - если галка стоит собираются еще и заголовки, если нет текст идет сплошняком
    Рандомные темы - для парсинга выбираются случайные темы, иначе есть блок правее где можно указать необходимые
    Синонимизировать - синонимизирует текст встроенной базой синонимов
    Перезаписывать файл - если задаются рандомные темы или выбранно больше 2-х тем то файл с текстами будет иметь префикс mix_data, если выбрана одна тема файл будет иметь ее название, например: literature_16.01.10.txt. Так вот если вы хотите что бы эти файлы перезаписывались каждый раз при начале парсинга ставьте галку.
    Использовать прокси - При каждом запросе программа будет брать случайное прокси из файла. Использует прокси из файла /resurs/proxy.txt . Если хотите указать свои прокси указывайте из в файле proxy_for_chek.txt и нажимайте кнопку проверка прокси.
    Потоков для проверки прокси - указывайте количество, если проксей много то лучше по больше, хотя я сознательно ограничил максимальную планку потоков, дабы не получать бан от сайта по которому они проверяются )
    Таймаут для прокси - как написанно так и есть
    Задержки в запросах - время в секундах, через которое будет производиться следующий запрос.

    Скачать

    Скачал на вин7, потребовалась вот Эта DLL'ka

    (с)
     
    #1 shuba, 11 Apr 2010
    Last edited: 11 Apr 2010
    1 person likes this.
  2. Lihosvet

    Lihosvet Member

    Joined:
    3 Dec 2009
    Messages:
    35
    Likes Received:
    5
    Reputations:
    0
    Скажите пожалуйста как яндекс относиться к этому тексту? :)
     
  3. LTK*

    LTK* Elder - Старейшина

    Joined:
    3 Mar 2006
    Messages:
    25
    Likes Received:
    4
    Reputations:
    0
    Контент там почти уникальный!
     
  4. toper07

    toper07 New Member

    Joined:
    23 Feb 2010
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    Ммм..... мою прожку выложили :D
    Скажите она еще работает?
    Кстати если есть что написать и пожелать то вам сюды
    Там же и запись на бете тест инвайтера вконтакте :)
     
    #4 toper07, 20 Apr 2010
    Last edited: 20 Apr 2010
  5. antibiotic

    antibiotic [ таблетка ]

    Joined:
    13 Jul 2009
    Messages:
    620
    Likes Received:
    520
    Reputations:
    245
    у меня был скрипт... ваще нерандомизировал ниче.. когда то доры лезли нормально
     
    _________________________
  6. Lihosvet

    Lihosvet Member

    Joined:
    3 Dec 2009
    Messages:
    35
    Likes Received:
    5
    Reputations:
    0
    toper07 большое спасибо!!! :)
     
  7. vaddd

    vaddd Member

    Joined:
    6 Jan 2009
    Messages:
    140
    Likes Received:
    19
    Reputations:
    9
    работает, прекрасно парсит
     
  8. toper07

    toper07 New Member

    Joined:
    23 Feb 2010
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    Спасибо вам, добрый человек.
    Кстати, нашел там багу-прога не все запроса делает через проксятины, но если она все прекрасно парсит , то это не важно. Важно чтоб парсила...
     
  9. RealMarkus

    RealMarkus New Member

    Joined:
    27 Nov 2009
    Messages:
    31
    Likes Received:
    1
    Reputations:
    0
    Мь дело в прокси... кодеин не прокатывает иногда.
    А вообще прога ниче так. Тоже на питоне написана ?
     
    #9 RealMarkus, 21 Apr 2010
    Last edited: 21 Apr 2010
  10. toper07

    toper07 New Member

    Joined:
    23 Feb 2010
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    Да это питон.
    Сейчас вообще модно писать для веба на питоне.