万能的MJJ,求一个Python爬虫

Aruba · 发表于 2018-5-21 18:16:26

各位万能的MJJ,求一个Python爬虫,只需要可以爬类似nginx下载站

类似这种可以自动进入每个目录再把里面的文件地址爬出来下载
自定义网站
感谢！

wtycn · 发表于 2018-5-21 18:25:53

关键词: sitemap

Aruba · 发表于 2018-5-21 18:49:27

wtycn 发表于 2018-5-21 09:25
关键词: sitemap

多谢我试试

陆伯言 · 发表于 2018-5-21 18:51:26

论坛里蓝天采集器就可以很方便。python做这个也很简单

baymin · 发表于 2018-5-21 18:58:50

全站下载不是直接wget ？

why? · 发表于 2018-5-21 19:05:24

wget -r ?

倪永孝 · 发表于 2018-5-21 21:23:01

idm就很不错

狗仔小分队 · 发表于 2018-5-21 22:08:25

wget即可，用不到爬虫

		自动登录	找回密码
密码			注册