WebMagic 0.7.1 版本发布,Java 爬虫框架

栏目: Java · 发布时间: 8年前

内容简介:WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架 黄亿华 发布于2017年06月04日 收藏 0

WebMagic 0.7.1 版本发布,Java 爬虫框架

【上云狂欢节】6元虚机+9元建站+免费套餐,将普惠进行到底!>>> WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架

此次更新包含几个比较大的Bugfix,以及一些遗留问题的改进。

  • 修复0.7.0引入的RedisScheduler无法使用的bug。 #583

  • 注解模式的JsonPath默认会指定source为RawText,不再会出现自动为头尾加了<html>标签导致无法解析的情况。 #589

  • RegexSelector之前版本默认匹配group1,并通过对无捕获组的正则头尾加括号的形式来统一抽取内容。在0.7.1版本改为不再改变正则,而是通过匹配group0还是group1来实现匹配,见 #559 。新做法可以减少一些特殊用法的出错几率,例如零宽断言( #556 )。

  • 重构了ObjectFormatter部分,修复了ObjectFormatter无法初始化参数的bug。 #570

相关链接

  • WebMagic 的详细介绍:点击查看
  • WebMagic 的下载地址:点击下载

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。

转载请注明: 文章转载自 开源中国社区 [http://www.oschina.net]

本文标题: WebMagic 0.7.1 版本发布,Java 爬虫框架

本文地址: https://www.oschina.net/news/85474/webmagic-0-7-1


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

趣学Python编程

趣学Python编程

Jason Briggs / 尹哲 / 人民邮电出版社 / 2014-3 / 45.00元

python是一款解释型、面向对象、动态数据类型的高级程序设计语言。python语法简捷而清晰,具有丰富和强大的类库,因而在各种行业中得到广泛的应用。对于初学者来讲,python是一款既容易学又相当有用的编程语言,国内外很多大学开设这款语言课程,将python作为一门编程语言学习。 《趣学python编程》是一本轻松、快速掌握python编程的入门读物。全书分为3部分,共18章。第1部分是第......一起来看看 《趣学Python编程》 这本书的介绍吧!

HTML 压缩/解压工具
HTML 压缩/解压工具

在线压缩/解压 HTML 代码

JSON 在线解析
JSON 在线解析

在线 JSON 格式化工具

MD5 加密
MD5 加密

MD5 加密工具