mxd
|
80c7aa32a0
|
v0.4.3
|
2020-04-02 09:54:50 +08:00 |
|
mxd
|
a62ca0125d
|
debug
|
2020-03-30 12:18:08 +08:00 |
|
mxd
|
dcab892dd8
|
调整队列出队时机
|
2020-03-27 11:44:21 +08:00 |
|
mxd
|
9cef96a04e
|
线程提交策略配置
|
2020-03-26 16:59:59 +08:00 |
|
mxd
|
0487423365
|
补上一个提交
|
2020-03-25 19:18:50 +08:00 |
|
mxd
|
a39168f48d
|
v0.4.2
|
2020-03-22 14:55:27 +08:00 |
|
mxd
|
f5fe0d2bca
|
调整任务执行顺序
|
2020-03-19 14:52:08 +08:00 |
|
mxd
|
621a835882
|
v0.4.1
|
2020-03-18 10:08:55 +08:00 |
|
mxd
|
0521536ec4
|
修复节点形成递归时判断其是否结束的BUG
|
2020-03-17 21:23:23 +08:00 |
|
mxd
|
452904ad12
|
移除LoopJoin执行器,新增ForkJoin执行器以及优化代码,增加注释,去除不必要的代码
|
2020-03-17 11:37:00 +08:00 |
|
mxd
|
90037a1678
|
v0.4.0
|
2020-03-15 20:22:35 +08:00 |
|
mxd
|
6109dece99
|
bug fix
|
2020-03-15 01:35:25 +08:00 |
|
mxd
|
4757a8c056
|
递归执行改为非递归执行
|
2020-03-14 19:16:18 +08:00 |
|
td_zhangyu
|
adbcbb974a
|
新增ExecutorsUtils和ExpressionUtils工具类初始化ShapeExecutor和ExpressionEngin
|
2020-03-11 15:57:29 +08:00 |
|
mxd
|
01b1474964
|
修复输出时可能出现的ArrayIndexOutOfBoundsException
|
2020-03-08 13:55:36 +08:00 |
|
mxd
|
964a3a63eb
|
update version to 0.3.2
|
2019-12-26 10:57:36 +08:00 |
|
mxd
|
ae8a55cda7
|
update version to 0.3.1
|
2019-12-23 10:19:51 +08:00 |
|
mxd
|
0db75a6426
|
修改日志实现方式
|
2019-12-21 20:41:51 +08:00 |
|
td_zhangyu
|
af690ef7c1
|
调整变量名
|
2019-12-20 15:25:34 +08:00 |
|
td_zhangyu
|
88ca287c16
|
还原pool连接池
|
2019-12-20 15:21:31 +08:00 |
|
td_zhangyu
|
a6ef10e059
|
新增同步线程池类
|
2019-12-19 17:48:47 +08:00 |
|
td_zhangyu
|
cd2dc85cad
|
1、调整SpiderContext为流线程池和任务线程池
2、新增插件功能描述及功能区显示
3、调整流程节点同步执行
4、调整xpath解析方式，修复原解析xpath异常错误
5、修复listVar.join中list.length为1时返回异常
6、其他细小功能优化
|
2019-12-19 17:44:22 +08:00 |
|
mxd
|
9a1e181d39
|
删除不必要的代码
|
2019-12-13 17:08:04 +08:00 |
|
mxd
|
9f7d90746c
|
update version to 0.3.0
|
2019-12-09 10:52:30 +08:00 |
|
td_zhangyu
|
c217f8f1d5
|
1、调整日志
2、新增resp获取title，url，新增resp.images()
3、新增url批量下载，不用再先爬取再下载
4、增加List<String>过滤方法
5、新增string.lastIndexOf
6、新增多函数执行
7、新增ThreadFunctionExecutor
8、调整RequestExecutor中延迟时间对第一次执行也生效
9、隐藏数据源中密码显示
10、日志查看增加动态滚动
|
2019-12-06 17:13:45 +08:00 |
|
mxd
|
785c3fc857
|
Cookie自动管理
|
2019-12-03 14:54:25 +08:00 |
|
mxd
|
384a3dab44
|
update version to 0.2.1
|
2019-11-17 13:39:28 +08:00 |
|
mxd
|
9e640ee7a8
|
修改查看日志的展示方式
|
2019-11-10 17:39:50 +08:00 |
|
mxd
|
1d7125f7b6
|
update version to 0.2.0
|
2019-11-03 18:03:32 +08:00 |
|
mxd
|
e8d4239d06
|
修复等待节点在双重循环中表现与预期不一致的BUG
|
2019-11-02 21:25:30 +08:00 |
|
mxd
|
e448efd229
|
update version to v0.1.0
|
2019-10-30 10:27:43 +08:00 |
|
mxd
|
f5267279b6
|
增加获取二进制流，可供下载大文件
|
2019-10-29 14:31:01 +08:00 |
|
mxd
|
23cf92e8a2
|
增加循环节点、等待循环结束节点 close #I13Y2X close #I13Y2V
|
2019-10-26 16:27:27 +08:00 |
|
mxd
|
d984709e2f
|
close #I13Y2P
|
2019-10-25 18:28:12 +08:00 |
|
varyuan
|
4f30c8f064
|
clean up code
|
2019-10-24 17:32:18 +08:00 |
|
mxd
|
54602dc3a1
|
增加resp.url用于获取当前url
|
2019-10-22 11:07:31 +08:00 |
|
mxd
|
b7d461ffda
|
LinkedBlockingDeque改成LinkedBlockingQueue
|
2019-10-14 17:26:44 +08:00 |
|
mxd
|
92a7ed1f89
|
优化线程池，避免线程数过多
|
2019-10-13 18:15:27 +08:00 |
|
mxd
|
34c9e1d077
|
增加调度日志记录、查看日志功能
|
2019-10-12 12:13:43 +08:00 |
|
mxd
|
ed9ca342d9
|
表达式增加动态方法
|
2019-10-04 16:42:52 +08:00 |
|
mxd
|
e534948648
|
优化代码
|
2019-10-04 16:42:16 +08:00 |
|
吕金泽
|
61f70ff3ef
|
封装CURDController给插件配置使用
|
2019-09-26 19:20:26 +08:00 |
|
吕金泽
|
81c0538afb
|
插件相关配置，单独提出来，动态在左侧菜单加载
|
2019-09-26 19:19:42 +08:00 |
|
吕金泽
|
4e3239c0a2
|
把jpa换成mybatis plus
|
2019-09-26 14:08:33 +08:00 |
|
mxd
|
7f4d53c143
|
表达式提示优化
|
2019-09-21 18:26:24 +08:00 |
|
mxd
|
1fd1e2f135
|
数据源单独管理
|
2019-09-19 14:30:33 +08:00 |
|
吕金泽
|
8281635544
|
删除文件 spider-flow-api/.gitignore
|
2019-09-18 16:00:54 +08:00 |
|
吕金泽
|
11b0d39829
|
删除文件 spider-flow-api/.classpath
|
2019-09-18 16:00:23 +08:00 |
|
吕金泽
|
fe9423e59e
|
删除文件 spider-flow-api/.project
|
2019-09-18 16:00:12 +08:00 |
|
吕金泽
|
3b9c2accd0
|
删除文件 spider-flow-api/.settings
|
2019-09-18 16:00:07 +08:00 |
|