转载

spider-flow 0.4.0 发布,Java 开源爬虫平台

spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫

更新日志

  • 新增自定义函数功能
  • 新增输出节点支持输出至数据库或csv文件
  • 新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents()
  • 修复日志文件内容为空的问题  #I1AXQK
  • 修复输出时可能出现的ArrayIndexOutOfBoundsException异常
  • 优化界面显示,并将右侧属性配置移到底部
  • 优化file函数,将下载调整为file.download(path,url)和file.download(path,urls)
  • 优化程序逻辑,将递归执行改为非递归执行
原文  https://www.oschina.net/news/114126/spider-flow-0-4-0-released
正文到此结束
Loading...