Python大法好!从此告别脚本系列!编写一个URL采集器!

  • A+
所属分类:python网络爬虫

URl采集在批量刷洞中也是很重要的

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

ZoomEyeAPI参考手册在这:ZoomEye API 参考手册

先登录,然后获取access_token

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

然后,API手册是这么写的,根据这个,咱们先写一个HOST的单页面采集的....

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

返回的信息量极大啊,但它也是个JSON数据,SO,我们可以取出IP部分...

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

之后,HOST的单页面采集也就OK了,WEB的也五五开,留着你们自己分析,其实差不多,后文会贴的

接下来,就是用FOR循环....获取多页的IP

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

接下来,就是基于shodan模块的...直接引用浅安dalao的。。。我懒得写....

安装:pip install shodan

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

然后是多页的爬取,比如爬取前20页的

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

Python大法好!从此告别脚本系列!编写一个URL采集器!

如有侵权请联系小编删除

Python大法好!从此告别脚本系列!编写一个URL采集器!

weinxin
我的微信公众号
爱真理,得永生!          爱在灵灵久博客,网罗天下,福利大家!

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: