小笙's Blog

CURL v1.0正式发布2015.01.20 13:53

由于公司近期需求,把测试版采集器改进了一下,目前采集器已经稳定运行一段时间,所以推出v1.0版本,仅用于交流学习。

v1.0更新日志

1.类库新增日志处理

可以将本次采集数据成功、失败数量以及相关时间等记录到文件或者数据库

2.类库新增抓取URL管理

针对批量采集的URL去重和管理

3.类库新增网络图片处理

github地址:https://github.com/xstudio/curler


  • 正在加载用户留言,请稍后~
点击这里取消回复

  • 请选择邮箱类型
  • @qq.com
  • @163.com
  • @sina.com
  • @126.com
  • @vip.qq.com
  • @sina.com.cn

:love: :kiss: :twist: :top: :shake: :bye: :han: :sleep: :lula: :rou: :happy: