Как просканировать все домены с определенным NS?

Discussion in 'Болталка' started by rodgers, 14 Jan 2019.

  1. rodgers

    rodgers New Member

    Joined:
    29 Dec 2010
    Messages:
    21
    Likes Received:
    1
    Reputations:
    0
    Подскажите кто знает как это делается, интересует не ру сегмента а .com .net etc. Какой софот это делает или сервис? Знаю что есть бесплатный способ нахождения, но не могу найти его пока, может у кого есть мысли по этому поводу.
     
  2. Coost

    Coost Active Member

    Joined:
    6 Jul 2017
    Messages:
    209
    Likes Received:
    180
    Reputations:
    5
  3. Coost

    Coost Active Member

    Joined:
    6 Jul 2017
    Messages:
    209
    Likes Received:
    180
    Reputations:
    5
    #3 Coost, 14 Jan 2019
    Last edited: 14 Jan 2019
  4. lifescore

    lifescore Elder - Старейшина

    Joined:
    27 Aug 2011
    Messages:
    593
    Likes Received:
    404
    Reputations:
    63
    зачем сканировать? исследовательские проекты/открытые данные уже не заходят?)

    без смс и регистраций бесплатный update на 1 число месяца
    https://opendata.rapid7.com/sonar.fdns_v2/

    [​IMG]

    ***fdns_cname.json.gz - распакованный 10+ гб пример данных выше
    110к+ domain/cname записей актуальных



    Пошуршишь поглубже, можно найти и полненький архив
    [​IMG]

    2 055 822 900 записей уже по лучше да?

    Также куча вариантов из подобных отчетов, по типу ssl/cert scan.

    з.ы. элементарно по торрентам валяется dnscensus2013 + InternetCensus2012 (правд уже 6-7 лет ему но около половины актуальны имхо)

    ------
    Ну может и этого не достаточно будет, то захардкорь парсер common crawl датасет.
    250 TiB веб архива, также прекрасно можно распарить не только на домены, но и URL links + сорсы страниц



    ------------------
    ну а по конкретно вопросу, какие то регистраторы выкладывают списки, какие-то zone transfer поддерживают (на гите есть чекалка последних tld парсер и прогон ns на zone transfer) но это маловато.. Стандартно остается либо покупать либо парсить-парсить-парсить-парсить и еще раз парсить..
     
    rodgers, crlf and seostock like this.
Loading...