В принципе, строк десять кода. Если дубликатов - значительное большинство - и того меньше. А можно не париться и тупо воткнуть своп на 50гб, лол.
Шаман Хит, решил следующим бабайским способом: Всего было 30к строк. Сгенерировал 30к уникальных слов ЫЯЫ{num}ЩЫЫЩ и поместил в первый столбец. Потом во второй вогнал мои строки. Скопировал все в Sublime Text и разделитель ячеек [TAB] заменил переходом на новую строку. Итого вышло: Потом удалил дубликаты строк, и назад заменил переходы на новую строку на ТАБы. Снова в таблицу, берем только второй столбец - ГОТОВО!
>> Ах, сколько бы восхитительного и первоклассного софта мир не увидел бы, знай люди про grep, sed и регулярки. В частности, практически любой вопрос\софт, упомянутый в топике реализуется одной строкой. I love seflquoting!
Посоветуйте Актуальный софт для задач: 1. 258 словарей имею - без объединения убрать Дубликаты, пробелы а так же символы которые не бугут быть в реалпассе. 2. желательно с Настройками пример привести.
Может кто подскажет, как вычесть один текстовый документ из другого, т.е. чтобы в двух текстовиках не было одинаковых строк (чтоб из двух одинаковых слов, в одном документе слово удалялось , а в другом оставалось) ?
Коллеги ищу софтину Mcheker и другие (Код ответа сервера) c сайта solutionfix[.]org ибо сам домен открыт для реги, совт с харда слетел, у кого есть - выложите пожалуйста на ЯндексДиск, спасибо!