有没有这样的安全爬虫系统

会翻车吗 · 发表于 2020-12-31 08:36:08

打开软件可以添加网址和关键词违禁词，然后点击开始，爬虫就自动爬这几千个网站，只要发现网站出现设置好的违禁词，就提醒我

gamerock · 发表于 2020-12-31 08:37:52

百度蜘蛛..就是这么操作的..
你可以联系一下百度获取蜘蛛源码

matoi · 发表于 2020-12-31 08:38:06

提示: 作者被禁止或删除内容自动屏蔽

会翻车吗 · 发表于 2020-12-31 08:40:07

matoi 发表于 2020-12-31 08:38
自己写一个咯

各大云安全部门应该都有这套系统应该都是自己开发的吧不知道普通人能不能找到类似的

忘江湖 · 发表于 2020-12-31 08:51:17

普通人自己写个就可以了，很简单的功能，不要一小时就能开发完毕。
无非就是多线程批量发起http请求爬，然后再寻找字符串完事

hjvn2211445 · 发表于 2020-12-31 08:53:56

dede的采集侠插件

会翻车吗 · 发表于 2020-12-31 08:54:21

忘江湖发表于 2020-12-31 08:51
普通人自己写个就可以了，很简单的功能，不要一小时就能开发完毕。
无非就是多线程批量发起http请求爬，然 ...

不会开发，市面上没有这类软件吗

		自动登录	找回密码
密码			注册