spider-flow 0.4.1 发布,Java 开源爬虫平台

栏目: 软件资讯 · 发布时间: 6年前

内容简介:spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫 新增ForkJoin执行器(用于等待之前的节点结束) 新增日志下载功能 #I1BQ35 新增docker部署 移除LoopJoin执行器,用ForkJoin代替 修复输出csv文...

spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫  

  • 新增ForkJoin执行器(用于等待之前的节点结束)
  • 新增日志下载功能 #I1BQ35
  • 新增 docker 部署
  • 移除LoopJoin执行器,用ForkJoin代替
  • 修复输出csv文件没有表头的问题
  • 修复最大线程数为1时爬虫不执行的问题
  • 修复strVar.xpath方法无法获取内容的问题
  • 修复修复节点形成递归时判断其是否结束的BUG
  • 修复前端日志打印不完整的BUG
  • 优化sidebar,取消滚动条,改为自适应 #I1BQ5

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。

Web导航设计

Web导航设计

James Kalbach / 李曦琳 / 电子工业出版社 / 2009 年3月 / 69.80元

业务目标的实现,依赖于用户能够找到并使用您提供的服务。本书为您讲述创建有效导航系统的基本设计原则、开发技巧和实用建议,并附有大量的真实案例。本书研究深入,援引广泛,是极佳的参考资料和教学指南,适用于初级和中级网页设计师、产品经理和其他非设计职位,以及寻求全新视角的Web开发老手。一起来看看 《Web导航设计》 这本书的介绍吧!

在线进制转换器
在线进制转换器

各进制数互转换器

图片转BASE64编码
图片转BASE64编码

在线图片转Base64编码工具

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换