Составление словарей для брутфорса составление и их дальнейшая очистка от повторений.

Discussion in 'Уязвимости' started by Teberium, 4 May 2018.

  1. Teberium

    Teberium New Member

    Joined:
    3 May 2018
    Messages:
    15
    Likes Received:
    0
    Reputations:
    0
    Имея 3 словаря, допустим, по 10 Гб в txt формате, хочу объединить их в один словарьout.txt(30Гб) и в далее хочу убрать повторяющиеся строки(пароли) из этого файла, как это реализовать у себя на пк?

    Может есть команды для объединения и очистки дублей(+ сортировки) или специализированный софт?

    Имею две OC Kali и W10.
     
  2. Andrey9999

    Andrey9999 Elder - Старейшина

    Joined:
    23 May 2012
    Messages:
    2,002
    Likes Received:
    15,960
    Reputations:
    58
    объединить: cat 1.txt 2.txt 3.txt > out.txt
    сортировать и удалить повторы: sort -u out.dic > sorted.dic
     
    Teberium likes this.
  3. Teberium

    Teberium New Member

    Joined:
    3 May 2018
    Messages:
    15
    Likes Received:
    0
    Reputations:
    0
    А изменить количество строк в файле out.txt можно с помощью команды uniq -s 3-8?
    Получается конечный команды:
    1.cat 1.txt 2.txt 3.txt > out.txt
    2.sort -u out.txt > sorted.txt
    3.uniq -s 3-7 sorted.txt sorted3-7.txt
    И получим словарь без повторов с кол-во символов от 3 до 7, верно?
     
  4. Andrey9999

    Andrey9999 Elder - Старейшина

    Joined:
    23 May 2012
    Messages:
    2,002
    Likes Received:
    15,960
    Reputations:
    58
    не совсем понятно что требуется - посмотри здесь
     
    Teberium likes this.
  5. Andrey9999

    Andrey9999 Elder - Старейшина

    Joined:
    23 May 2012
    Messages:
    2,002
    Likes Received:
    15,960
    Reputations:
    58
    если нужно оставить слова только с от 3 до 7 символами, то: sed -r '/^.{3,7}$/!d' sorted.txt > ot3do7.txt
     
    Teberium and hydra like this.
Loading...