Как удалить Дубли с Оригиналом по фасту

Discussion in 'Песочница' started by Found, 16 Dec 2015.

  1. Found

    Found Banned

    Joined:
    23 Nov 2015
    Messages:
    81
    Likes Received:
    64
    Reputations:
    23
    Ребят,
    Парюсь который день, как можно быстро и без гемороя удалить в тексте ДУбли вместе с Оригиналом, на выходе получит чисто без дублей и оригинала дубля.

    Пример:

    12345
    123
    1234
    12345

    -Получить
    123
    1234

    Онлайн тулза есть подобная? или в тестовике по фасту можно? - что б не напрегатся сильно софтом, или экзелем -нужно делать удалять очень быстро
     
  2. Semwize

    Semwize Elder - Старейшина

    Joined:
    30 Nov 2006
    Messages:
    579
    Likes Received:
    912
    Reputations:
    25
    bvsDupDelet

    галку на "уникальный"
     
    Found likes this.
  3. rct

    rct Active Member

    Joined:
    13 Jun 2015
    Messages:
    359
    Likes Received:
    107
    Reputations:
    7
    Code:
    def main(file):
        f = open(file, 'r').readlines()
        unic = {hash(l): l for l in f.split("\n")}
        return unic
    open(sys.argv[1], 'w').write(main(sys.argv[1]))
    Должно сработать.
     
    #3 rct, 16 Dec 2015
    Last edited: 20 Dec 2015
    grimnir likes this.
  4. xusanokaz

    xusanokaz New Member

    Joined:
    6 Jan 2016
    Messages:
    49
    Likes Received:
    1
    Reputations:
    0
    FlodDUblecator
     
  5. Found

    Found Banned

    Joined:
    23 Nov 2015
    Messages:
    81
    Likes Received:
    64
    Reputations:
    23
    Спасибо, Пользуюсь посоветованным софтом радует на ура.
    Теперь такой вопрос, там много галочек, 1 меня сейчас один словарь большой объединенный в нем около 100+ словарей, допустим 20 раз повторяется пароль: 12345 -как удалить 19 штуки о оставить один оригинал?) Какую галочку там ткнуть на Eng и много с Duble фразой хз что нажать
     
  6. Found

    Found Banned

    Joined:
    23 Nov 2015
    Messages:
    81
    Likes Received:
    64
    Reputations:
    23
  7. nick_sale

    nick_sale Member

    Joined:
    15 Jun 2012
    Messages:
    2
    Likes Received:
    9
    Reputations:
    0
    качаешь notepad++,жмешь ctrl+h,переходишь в пометки....там ставишь галочку,помечать закладкой,и вводишь слово поиска...после идешь в поиск=>закладки=>убрать все строки с закладкой
     
    Dealer_telegram likes this.