全球主机交流论坛

标题: 辞职在家，有数据抓取爬虫定制工具开发方面需求的请联系 [打印本页]

作者: cdwyd 时间: 2016-10-15 20:13
标题: 辞职在家，有数据抓取爬虫定制工具开发方面需求的请联系
这是一个硬广，还望版主手下留情不要封号。
最近辞职在家，打算接一些外包的单子，比较熟悉是web、爬虫、工具方面开发任务。

主要技能清单如下：
* Python（尤其是数据抓取方面，熟悉常见的爬虫及反爬策略）
* PHP（能比较熟练的使用thinkphp或者ci开发web应用）
* HTML、CSS（熟悉）
* JS（能写简单的）
* SEO（熟悉）

最近的项目：
* 百度网盘数据抓取（大概抓取了8000W数据，去重、筛选后使用LNMP架构，CI框架，ES搜索引擎进行展示）
* 豆瓣图书和电影的所有条目以及对应的前100条评论（还没想到这个有什么用）
* 前公司项目（微信公众号会员注册管理下线推广以及ERP数据对接等）

其他说明:
由于Python、PHP都不太适合开发桌面应用，C#也快两年没用了，所有如果是桌面软件的开发可能暂时做不到。

欢迎有需求的朋友联系QQ：2870698831
目前时间比较充裕，大单小单来者不拒。

作者: gger 时间: 2016-10-15 20:42
mark了哦。。

作者: cdwyd 时间: 2016-10-15 21:22

helwo 发表于 2016-10-15 20:26
豆瓣得那个导入帝国就是个站了。多舒服得。
就是没有钱。有钱就下手

要不免费送你一份？

作者: gcczm 时间: 2016-10-15 21:23
想要请人弄个小桌面应用

作者: 今日说法 时间: 2016-10-15 21:34

cdwyd 发表于 2016-10-15 21:22
要不免费送你一份？

可否送我一份。

作者: 三一土白 时间: 2016-10-15 21:42
百度网盘的数据能给我份么？

作者: 8idc.com 时间: 2016-10-15 21:44
爬微信公众号

作者: sdfarmer 时间: 2016-10-15 21:47
微信公众号会员注册管理下线推广以及ERP数据对接等

竟然没看懂

作者: eben 时间: 2016-10-15 21:50
爬虫我喜欢

作者: bb1234a 时间: 2016-10-15 21:56
有没有自定义关键词爬相关文章的

作者: qwe321 时间: 2016-10-15 22:23
有没有办法爬同行网站的联系方式，如QQ、邮箱、电话之类的

作者: 张大牛 时间: 2016-10-15 22:37

cdwyd 发表于 2016-10-15 21:22
要不免费送你一份？

同求，

作者: lgp7226 时间: 2016-10-15 22:39
收藏一下，以后有需求再找楼主吧。

作者: cdwyd 时间: 2016-10-16 22:28

今日说法发表于 2016-10-15 21:34
可否送我一份。

http://443502.xyz/thread-334536-1-1.html
公开发数据不太好，链接里有源码

作者: cdwyd 时间: 2016-10-16 22:29

helwo 发表于 2016-10-15 21:41
非常感谢。你这个爬数据速度快不？

速度还可以，几天就可以爬完。没有公开提供数据下载，豆瓣的采集源码这贴有：http://443502.xyz/thread-334536-1-1.html

作者: cdwyd 时间: 2016-10-16 22:33

三一土白发表于 2016-10-15 21:42
百度网盘的数据能给我份么？

百度网盘的提供了抓取思路，数据没有公开，请理解
http://443502.xyz/thread-334536-1-1.html

作者: cdwyd 时间: 2016-10-16 22:34

8idc.com 发表于 2016-10-15 21:44
爬微信公众号

公众号比较早之前弄个，微信反爬虫策略一直在更新，如果有需要可以联系QQ进一步沟通

作者: cdwyd 时间: 2016-10-16 22:35

qwe321 发表于 2016-10-15 22:23
有没有办法爬同行网站的联系方式，如QQ、邮箱、电话之类的

非公开的没办法爬，可以去试试社工库

作者: qwe321 时间: 2016-10-17 04:47

cdwyd 发表于 2016-10-16 22:35
非公开的没办法爬，可以去试试社工库

肯定就是公开的。

作者: 如何让我遇见你 时间: 2016-10-17 08:13
话说，那个最性感的编辑神器就是python搞的

作者: ankangnew 时间: 2016-10-17 09:48
提示: 作者被禁止或删除内容自动屏蔽

作者: bigexiu 时间: 2016-10-17 11:05
好还不错哦 Python 永远当不了原创的样子

作者: thomas070 时间: 2016-10-17 11:15
微信公众号爬虫，楼主研究过吗

作者: cdwyd 时间: 2016-10-17 11:28

qwe321 发表于 2016-10-17 04:47
肯定就是公开的。

可以私信发个页面吗或者把需求说详细点

作者: cdwyd 时间: 2016-10-17 11:29

thomas070 发表于 2016-10-17 11:15
微信公众号爬虫，楼主研究过吗

之前研究过，有需要的话可以联系QQ

作者: 王表弟 时间: 2016-10-17 11:36

cdwyd 发表于 2016-10-15 21:22
要不免费送你一份？

楼主能送我一份吗？我也想学下爬虫

欢迎光临全球主机交流论坛 (https://443502.xyz/)