全球主机交流论坛

标题: 有老哥能爬豆瓣电影吗？ [打印本页]

作者: yswei 时间: 2020-4-7 21:40
标题: 有老哥能爬豆瓣电影吗？
豆瓣电影的电影电视剧综艺动漫的url或者ID，我再开火车采集。

作者: h20 时间: 2020-4-7 21:40
提示: 作者被禁止或删除内容自动屏蔽

作者: ByteCat 时间: 2020-4-7 21:43
豆瓣 API 跪了

作者: 夏生啊 时间: 2020-4-7 21:44
没有资源爬他干啥

作者: yswei 时间: 2020-4-7 21:44

h20 发表于 2020-4-7 21:40
爬imdb不好吗

想要中文的。。

作者: 你的鼻子很长嘛 时间: 2020-4-7 21:50
我可以，不过有什么报酬吗

作者: 扬州长者 时间: 2020-4-7 21:53
GD有top250资源

作者: hehe 时间: 2020-4-7 22:34
提示: 作者被禁止或删除内容自动屏蔽

作者: yswei 时间: 2020-4-7 22:38

你的鼻子很长嘛发表于 2020-4-7 21:50
我可以，不过有什么报酬吗

可以报价

作者: FeiLai 时间: 2020-4-12 21:55

你的鼻子很长嘛发表于 2020-4-7 21:50
我可以，不过有什么报酬吗

PM报价

作者: 爬虫部落 时间: 2020-4-12 22:11
我这里有目前应该是最全的豆瓣电影id信息，需要的话pm价格。合适的话会考虑出

作者: yswei 时间: 2020-4-12 22:37

爬虫部落发表于 2020-4-12 22:11
我这里有目前应该是最全的豆瓣电影id信息，需要的话pm价格。合适的话会考虑出 ...

ID我也有，不过没什么用，需要分类的。

作者: 爬虫部落 时间: 2020-4-12 22:41

yswei 发表于 2020-4-12 22:37
ID我也有，不过没什么用，需要分类的。

价格到了，什么都有

如果你id够全直接去抓内容就行

作者: 翻车的老司机 时间: 2020-4-12 22:53
用家宽拨号爬最好，爬一会封ip了再拨号换ip爬

作者: SFA 时间: 2020-4-12 22:53
豆瓣有api，不过有限制请求频率

作者: 张大牛 时间: 2020-4-12 23:27
同求一份，大佬代价pm吧

作者: yswei 时间: 2020-4-12 23:34

爬虫部落发表于 2020-4-12 22:41
价格到了，什么都有

如果你id够全直接去抓内容就行

不知道怎么获取分类

作者: 爬虫部落 时间: 2020-4-12 23:37

yswei 发表于 2020-4-12 23:34
不知道怎么获取分类

我的数据好像除了短评其他字段都抓了，要是价格合适可以考虑出，或者根据你提供的id抓取需要的字段

作者: yswei 时间: 2020-4-12 23:39

爬虫部落发表于 2020-4-12 23:37
我的数据好像除了短评其他字段都抓了，要是价格合适可以考虑出，或者根据你提供的id抓取需要的字段 ...

怎么判断是电影电视剧综艺还是动漫呢？

作者: 爬虫部落 时间: 2020-4-12 23:41

yswei 发表于 2020-4-12 23:39
怎么判断是电影电视剧综艺还是动漫呢？

明天回去看看代码，我记得电影电视是一级分类，还有具体所属类型的二级分类。

作者: yswei 时间: 2020-4-12 23:47

爬虫部落发表于 2020-4-12 23:41
明天回去看看代码，我记得电影电视是一级分类，还有具体所属类型的二级分类。 ...

豆瓣的代码里，综艺动漫都写的电视剧。

作者: 小欢子 时间: 2020-4-12 23:53
浏览器 F12-Network(点开加载的文件看看，就知道怎么提取豆瓣的影片URL了)

作者: 爬虫部落 时间: 2020-4-13 00:07

yswei 发表于 2020-4-12 23:47
豆瓣的代码里，综艺动漫都写的电视剧。

直接pm预算吧，预算合适的话可以解决，能保证绝大多数分类的准确

欢迎光临全球主机交流论坛 (https://443502.xyz/)