Commit Graph

51 Commits

Author SHA1 Message Date
mxd
374f60b07a 增强循环 2020-04-09 17:03:02 +08:00
mxd
7761eee3ee rest服务增加异步接口 2020-04-09 09:02:40 +08:00
mxd
0379b02e7b 代码优化 2020-04-05 13:50:39 +08:00
mxd
5e7b6afd0b close #I1CH36 2020-04-05 12:39:25 +08:00
BillDowney
385cb98cbe 增加流程通知,暂时只支持邮件通知 2020-04-04 03:08:08 +08:00
mxd
a62ca0125d debug 2020-03-30 12:18:08 +08:00
mxd
dcab892dd8 调整队列出队时机 2020-03-27 11:44:21 +08:00
mxd
9cef96a04e 线程提交策略配置 2020-03-26 16:59:59 +08:00
mxd
0487423365 补上一个提交 2020-03-25 19:18:50 +08:00
mxd
f5fe0d2bca 调整任务执行顺序 2020-03-19 14:52:08 +08:00
mxd
0521536ec4 修复节点形成递归时判断其是否结束的BUG 2020-03-17 21:23:23 +08:00
mxd
452904ad12 移除LoopJoin执行器,新增ForkJoin执行器以及优化代码,增加注释,去除不必要的代码 2020-03-17 11:37:00 +08:00
mxd
6109dece99 bug fix 2020-03-15 01:35:25 +08:00
mxd
4757a8c056 递归执行改为非递归执行 2020-03-14 19:16:18 +08:00
td_zhangyu
adbcbb974a 新增ExecutorsUtils和ExpressionUtils工具类初始化ShapeExecutor和ExpressionEngin 2020-03-11 15:57:29 +08:00
mxd
01b1474964 修复输出时可能出现的ArrayIndexOutOfBoundsException 2020-03-08 13:55:36 +08:00
mxd
0db75a6426 修改日志实现方式 2019-12-21 20:41:51 +08:00
td_zhangyu
af690ef7c1 调整变量名 2019-12-20 15:25:34 +08:00
td_zhangyu
88ca287c16 还原pool连接池 2019-12-20 15:21:31 +08:00
td_zhangyu
a6ef10e059 新增同步线程池类 2019-12-19 17:48:47 +08:00
td_zhangyu
cd2dc85cad 1、调整SpiderContext为流线程池和任务线程池
2、新增插件功能描述及功能区显示
3、调整流程节点同步执行
4、调整xpath解析方式,修复原解析xpath异常错误
5、修复listVar.join中list.length为1时返回异常
6、其他细小功能优化
2019-12-19 17:44:22 +08:00
mxd
9a1e181d39 删除不必要的代码 2019-12-13 17:08:04 +08:00
td_zhangyu
c217f8f1d5 1、调整日志
2、新增resp获取title,url,新增resp.images()
3、新增url批量下载,不用再先爬取再下载
4、增加List<String>过滤方法
5、新增string.lastIndexOf
6、新增多函数执行
7、新增ThreadFunctionExecutor
8、调整RequestExecutor中延迟时间对第一次执行也生效
9、隐藏数据源中密码显示
10、日志查看增加动态滚动
2019-12-06 17:13:45 +08:00
mxd
785c3fc857 Cookie自动管理 2019-12-03 14:54:25 +08:00
mxd
9e640ee7a8 修改查看日志的展示方式 2019-11-10 17:39:50 +08:00
mxd
e8d4239d06 修复等待节点在双重循环中表现与预期不一致的BUG 2019-11-02 21:25:30 +08:00
mxd
f5267279b6 增加获取二进制流,可供下载大文件 2019-10-29 14:31:01 +08:00
mxd
23cf92e8a2 增加循环节点、等待循环结束节点 close #I13Y2X close #I13Y2V 2019-10-26 16:27:27 +08:00
mxd
d984709e2f close #I13Y2P 2019-10-25 18:28:12 +08:00
varyuan
4f30c8f064 clean up code 2019-10-24 17:32:18 +08:00
mxd
54602dc3a1 增加resp.url用于获取当前url 2019-10-22 11:07:31 +08:00
mxd
b7d461ffda LinkedBlockingDeque改成LinkedBlockingQueue 2019-10-14 17:26:44 +08:00
mxd
92a7ed1f89 优化线程池,避免线程数过多 2019-10-13 18:15:27 +08:00
mxd
34c9e1d077 增加调度日志记录、查看日志功能 2019-10-12 12:13:43 +08:00
mxd
ed9ca342d9 表达式增加动态方法 2019-10-04 16:42:52 +08:00
mxd
e534948648 优化代码 2019-10-04 16:42:16 +08:00
吕金泽
61f70ff3ef 封装CURDController给插件配置使用 2019-09-26 19:20:26 +08:00
吕金泽
81c0538afb 插件相关配置,单独提出来,动态在左侧菜单加载 2019-09-26 19:19:42 +08:00
吕金泽
4e3239c0a2 把jpa换成mybatis plus 2019-09-26 14:08:33 +08:00
mxd
7f4d53c143 表达式提示优化 2019-09-21 18:26:24 +08:00
mxd
1fd1e2f135 数据源单独管理 2019-09-19 14:30:33 +08:00
mxd
42af698f51 实现动态扩展方法,方便链式调用 2019-09-14 16:27:54 +08:00
mxd
dd0f8ef619 新增停止测试、重新开始测试功能 2019-09-11 18:45:53 +08:00
mxd
e22962b44f 前端测试日志优化显示 2019-09-04 17:52:50 +08:00
mxd
bcd17dcf68 页面编码格式设置 2019-09-03 10:25:45 +08:00
mxd
4aeb76f6fa 语法高亮、自动补全提示 2019-09-01 14:31:56 +08:00
mxd
7acdda45d9 代码优化,减少创建线程 2019-08-26 16:19:06 +08:00
mxd
106820a515 支持HTTP接口 2019-08-14 14:45:32 +08:00
mxd
47d8f1a58d selenium插件 2019-08-09 10:13:00 +08:00
mxd
69cdb9515e 更改包结构,增加方法执行器接口 2019-08-09 10:12:32 +08:00