听说火车在牛人眼里算非常低效率的采集工具了

cw723 · 发表于 2011-5-13 18:48:05

谁给提供一个高效率的呀。
最好是Linux下的采集工具

wjhhxl · 发表于 2011-5-13 18:50:47

什么样的牛人，说说~

他应该是不会用吧。

moto72 · 发表于 2011-5-13 18:52:15

什么样的采集工具？自己写的算不 java快平台

l12ab · 发表于 2011-5-13 18:52:22

curl。。。

挨个搞 · 发表于 2011-5-13 18:52:59

自己用curl + 正则写呗

wske · 发表于 2011-5-13 18:53:12

提示: 作者被禁止或删除内容自动屏蔽

李院长 · 发表于 2011-5-13 18:53:27

wget

wzwen · 发表于 2011-5-13 18:57:24

牛人总是与众不同

Host.HowPick · 发表于 2011-5-13 18:58:24

原帖由 wzwen 于 2011-5-13 18:57 发表
牛人总是与众不同

Kokgog · 发表于 2011-5-13 19:04:30

自己写的最高效
接下来是nutch,heritrix,scrapy这类爬虫框架，具体的连接处理和入库也要自己写的
第三类是火车头这些
第四类是php,asp之类的web采集器

越是通用的方案，越要考虑用户的使用习惯的程序，越是低效，本来就是共识

		自动登录	找回密码
密码			注册