dcrawl

dcrawl adalah web crawler sederhana namun cerdas, multi-threaded untuk mengumpulkan daftar nama domain unik secara acak.

Detail : https://github.com/kgretzky/dcrawl