皮皮软件

域名采集器

域名采集器

客服QQ:929058152

站长软件客服微信

客服微信

请注意,采集域名结果与输入的关键词不相关,词工具主要是爬虫式采集,采集量非常大,就是不定爬到什么网站,如果要采集必须跟关键词相关的域名请用网站搜索工具


本软件工作原理是从一个初始网址中,查找外部网站,比如初始页面中有30个外部网站,那就继续爬取这30个外本网站,


可以正常访问的就收录进数据库,并且在这30个网站中再次查找外部网站如果每个站有30个外部网站,那就是30*30=900个


然后再访问这900个网站剔除无法访问的,找到正常访问的剔除重复加入数据库,然后再查找他们页面中的外部网站,如需往复


形成裂变式蜘蛛网!



当然这里边需要处理很多事情,比如爬行记录的去重、多线程之间的干扰、等等问题


历时一个月终于开发调试出抢答稳定的2.0版本。更好的利用了现代多核CPU的性能


历史版本性能:

第一版跑出10分钟1W+的网址数,已经非常强悍了

2.5版10分钟跑出2.8万个,注意这都是去重复后的网址哦,而且都是顶级域名

3.0版10分钟采集13万+个网站

3.2版  采集21万用时9分钟

每一次升级都是质的飞越,购买过的朋友快来下载最新版吧!


二级域名不算我们不采集没有用


具体的性能看你自己的电脑配置了,各位可以根据自己电脑配置适当调整线程数


这个5年前就买的最低配的货,也该淘汰了工欲善其事必先利其器 这个道理是对的



采集域名:

如来域名采集器皮皮软件



导出域名:

如来域名采集器皮皮软件



皮皮软件专注软件开发技术

Copyright © 皮皮软件

平台客服 929058152 08:00 - 22:00