聊聊大家平时采集数据时用什么工具吧！

*发表于 2014-5-30 13:43:04* · 发表于 2014-5-30 13:43:04

想知道各位大神平时采集数据时都用哪些工具呢？

先说下我用的：
1、火车头；
2、python+scrapy；

*发表于 2014-5-30 13:45:57* · 发表于 2014-5-30 13:45:57

同样不过前段时间公司外包给别人用的java

*发表于 2014-5-30 14:07:50* · 发表于 2014-5-30 14:07:50

Python: pycurl + re，基本搞定各种采集

*发表于 2014-5-30 16:06:38* · 发表于 2014-5-30 16:06:38

火车头、python（各种库）、最近在研究PHP采集

*发表于 2014-6-7 13:22:15* · 发表于 2014-6-7 13:22:15

或许shell也可以实现

*发表于 2014-6-9 17:14:19* · 发表于 2014-6-9 17:14:19

火车头搞定...

帐号		自动登录	找回密码
密码			注册