计算中间件,Linkis 0.9.1重磅发布,新增物料库模块,支持Yarn的Capacity调度,支持kerberos等功能特性。
物料库模块:系统和用户级物料管理、物料支持分享和版本控制,支持全生命周期自动管理;
支持Yarn的Capacity调度:在原有支持Fair Scheduler的基础上加上对Yarn的Capacity Scheduler的支持;
Kerberos支持:支持Linkis部署在Kerberos集群上;
特性增强
- [Linkis-123] 增加物料库模块功能:系统和用户级物料管理,可分享和流转,支持物料全生命周期自动管理
- [Linkis-62] 支持外部系统通过代理模式进行访问.
- [Linkis-69] Linkis支持将Publicservice拆分成多个微服务.
- [Linkis-112] Metadata模块增加,加入用户向导建表功能.
- [Linkis-120] 工作空间模块增强,支持解析和保存BML的脚本.
- [Linkis-72] Linkis httpClient 增强upload功能.
- [Linkis-109] Linkis-ujes-client模块功能增强,支持直接传入engineType和runtype字符串.
- [Linkis-111] 修改启动类中包扫描为com.webank.wedatasphere.
- [Linkis-116] 优化安装和启动脚.
- [Linkis-138] 支持适配多Spark版本
- [Linkis-139] 优化kerberos功能支持带host和不带host的方式进行访问
- [Linkis-100 ] Linkis-RM兼容Yarn的Fair和Capacity调度
Bug修复
- [Linkis-71] 修复DWSHttpMessageFactory 中Reflections不指定类加载器,导致类加载不到的问题.
- [Linkis-74] 修复DB脚本由于编译导致的乱码问题.
- [Linkis-87] 修复ujes-client获取日志的问题.
- [Linkis-108] 修复engine结果集默认路径带IP和端口导致在hdfs上面创建路径失败.
- [Linkis-129] 修复Spark引擎执行scala时报Class org.apache.hadoop.net.StandardSocketFactory not found.
- [Linkis-132] 修复Jobhistory不能返回source字段的问题.
- [Linkis-134] 修复jobHistory的接口没有做权限隔离的问题.