大数据处理
首页  >  大数据处理

PB数据采集平台

发布时间:2017-04-24 11:46:39


一个供各大主流文章系统,论坛系统等使用的多线程内容采集发布程序。基于内容列表页和内容页的调度采集,支持移动端采集和PC端采集。

支持的功能包括:

列表页模板配置,详细页模板配置,入库方式,Agent配置。

基于Csspath进行页面的解析抽取,支持任务调度策略。

分享到:
Copyright ©2014-2017 北京珀百技术服务有限公司 版权所有