全球主机交流论坛

标题: 有没有这样的安全爬虫系统 [打印本页]

作者: 会翻车吗    时间: 2020-12-31 08:36
标题: 有没有这样的安全爬虫系统
打开软件可以添加网址和关键词违禁词,然后点击开始,爬虫就自动爬这几千个网站,只要发现网站出现设置好的违禁词,就提醒我
作者: gamerock    时间: 2020-12-31 08:37
百度蜘蛛..就是这么操作的..
你可以联系一下百度获取蜘蛛源码
作者: matoi    时间: 2020-12-31 08:38
提示: 作者被禁止或删除 内容自动屏蔽
作者: 会翻车吗    时间: 2020-12-31 08:40
matoi 发表于 2020-12-31 08:38
自己写一个咯

各大云安全部门应该都有这套系统 应该都是自己开发的吧 不知道普通人能不能找到类似的
作者: 忘江湖    时间: 2020-12-31 08:51
普通人自己写个就可以了,很简单的功能,不要一小时就能开发完毕。
无非就是多线程批量发起http请求爬,然后再寻找字符串完事
作者: hjvn2211445    时间: 2020-12-31 08:53
dede的采集侠插件
作者: 会翻车吗    时间: 2020-12-31 08:54
忘江湖 发表于 2020-12-31 08:51
普通人自己写个就可以了,很简单的功能,不要一小时就能开发完毕。
无非就是多线程批量发起http请求爬,然 ...

不会开发,市面上没有这类软件吗




欢迎光临 全球主机交流论坛 (https://443502.xyz/) Powered by Discuz! X3.4