网络矿工V5.33终于发布了。让好多朋友久等了,赶快来下载吧!
此次V5.33最大的修正则为采集计划的问题,采集计划在设置周运行时会出现偶发不执行情况,此问题终于修正。同时V5.33在分布式采集方面做了非常多的优化处理,以使得分布式采集管理更加便捷,同时还提供了远程引擎监控器。一切为了采集。
总结一下V5.33的新特性,正式用户可根据自己实际情况进行升级:
1、修正了采集计划Bug;
2、增加了采集过程中打码操作;
3、网址参数,日期参数,支持自定义日期格式,对于采集电子报等类型的网站,可以更好的模拟网址;
4、增加了页面计算自动变量,针对于ajax页面的数据,当无法获取最大页面值时,可以通过此变量,对最大页码进行计算,以提升软件的采集精度;避免过多无用的请求;
=================== 以下为企业版+增加的功能 ==========================
5、分布式任务可直接调用服务器数据库设置参数,降低配置的难度;
6、分布式执行时,可强制单客户端仅执行一个分解子任务,防止过多的请求造成IP被封;
7、可对采集任务的分解进行策略调整;
8、增加Web接口,可以获取更加详细的采集任务执行情况;
9、提供远程监控器,对引擎的执行情况进行实时监控;
此版本主要是对企业版+进行了优化,旗舰版及以下客户可以考虑暂不升级,如使用到了计划且出现偶发不执行情况,可升级修正此bug;