openLooKeng新版本1.7.0正式发布
“绿树阴浓夏日长,楼台倒影入池塘”,在这个万物丰茂,热情似火的仲夏时节, 我们迎来了openLooKeng社区两周岁生日!键盘之上,格物致知,致力于共建大数据繁荣生态,是每一位大数据圈开发者的底色,自 2020 年 6 月 30 日开源以来,openLooKeng保持着3个月的版本迭代速度,一直致力于提供极简的数据分析体验,搭载更多行业场景。
恰逢openLooKeng两岁生辰之际,我们马不停蹄地给大家递上openLooKeng最新的1.7.0版本,接下来让我们来看看,此次新版本1.7.0有哪些“新”变化…….
算子处理扩展
增加通过用户自定义worker结点物理执行计划的生成,用户可以实现自己的算子pipeline代替原生实现,加速算子处理。支持实现算子Native化计算。 |
Task Recovery
1 | 支持不开启快照特性时,实现失败任务重试 |
2 | 支持在CLI端调试模式下显示快照相关统计信息:包括正在捕获的快照数量、已经捕获的快照数量、恢复次数(包括查询重启)、捕获的所有快照大小和捕获快照所需时间、用于恢复的快照大小和恢复时间 |
3 | 资源管理:在任务消耗大量内存导致内存不足时自动暂停/恢复任务,用户也可以选择主动暂停和恢复任务(限于CTAS和INSERT INTO SELECT场景) |
4 | 增加可配置的失败重试策略:①超时重试策略 ②最大次数重试策略 |
5 | 新增Gossip失败检测机制:控制节点通过定期接收心跳来监控工作节点是否存活,Gossip机制使得所有工作节点能够相互监测,确保所有节点所知的信息都是一致的,可以防止在集群中出现短暂网络故障时导致过早的查询失败 |
openLooKeng WEB UI增强
1 | openLooKeng审计日志功能增强 |
2 | openLooKeng SQL历史记录持久化 |
3 | SQL Editor支持自动联想 |
4 | 支持常用SQL语句收藏 |
5 | 数据源加载异常时,前端可通过异常标记显示 |
6 | UI支持显示数据源信息 |
openLooKeng集群管理平台
1 | 提供图形化的指标监控及定制,及时获取系统的关键信息 |
2 | 提供服务属性的配置管理,满足实际业务的性能需求 |
3 | 提供集群、服务、实例的操作功能,满足一键启停等操作需求 |
4 | 提供openLooKeng在线部署功能,支持在线升级 |
5 | 提供节点伸缩服务 |
6 | 集成openLooKeng现有的Web UI |
7 | openLooKeng Manager工具支持用户登录/退出功能 |
openLooKeng已开源两年,目前openLooKeng 已有社区用户数达到 120K + ,源源不断的用户贡献让openLooKeng保持青春与活力,这份耕耘属于社区中每一位开发者,熠熠生辉的瞬间,是每一位开发者点亮的星火。
从初识openLooKeng开始,到你在社区写下的第一行代码,再到你提出的每个PR,都是独属于你与openLooKeng的独家记忆,在openLooKeng开源两周年的日子,“对于大数据虚拟化引擎openLooKeng,你有哪些寄语送给它?”(送出生日祝福,请移步issue评论区:生日祝福有奖征集:我与openLooKeng的独家记忆 · Issue #I5EKF3 · openlookeng-competition/events-issue - Gitee.com)
openLooKeng 新版本 v1.7.0 下载地址:openLooKeng
openLooKeng 代码仓地址: openLooKeng: A Distributed, Low Latency, Reliable Data Engine for All Data, Big or Small, Local or Remote.
openLooKeng 社区官网: openLooKeng
openLooKeng 小助手微信号:openLooKengoss
openLooKeng两周年有奖征集祝福:生日祝福有奖征集:我与openLooKeng的独家记忆 · Issue #I5EKF3 · openlookeng-competition/events-issue - Gitee.com