Apache Kylin : Analytical Data Warehouse for Big Data

Page tree

Welcome to Kylin Wiki.

Kylin 用户大家好啊,转眼间又过去了两个月,我们在这里和大家更新一下十月和十一月的开发进度,以下是 Kylin 社区十月和十一月的主要工作内容:

Apache Kylin 4.0.0-Beta

十月和十一月 Kylin 4.0.0-Beta 相关的开发工作有如下更新:

新功能或优化改进

  • 支持 Spardar Canary Tool,详情见 KYLIN-4800 - Add canary tool for sparder-context RESOLVED

  • 梳理 Cube Planner 相关的设计与开发,我们计划在 Kylin 4.0.0-Beta 版本中支持 Cube Planner,目前尚处于设计阶段,具体请见 wiki Cuboid optimization in Kylin 4.0。这两个月我们主要在开发计算 Cuboid 的统计信息,详情见 KYLIN-4818 - Calculate cuboid statistics in Kylin 4 IN PROGRESS

  • 重构构建相关的日志代码,详情见 KYLIN-4813 - Refine spark logger for Kylin 4 build engine RESOLVED

  • 开发 Cube Migration Tool,详情见 KYLIN-4817 - Refine Cube Migration Tool for Kylin4 - IN PROGRESS

  • 多种云平台兼容性测试,目前我们已经完成 AZure HDI 3.6 兼容性测试并已支持兼容 AZure HDI 3.6,接下来会进行 AWS EMR 5 的兼容性测试。

  • 补充查询、构建相关的 IT 集成测试,详情见 KYLIN-4782 - Verify if the query hit the true cuboid in IT - RESOLVED

  • 开发自动化测试平台,在这个平台上,Kylin 的开发者能够通过 Docker-Compose 启停 Hadoop 集群和 Kylin 实例,并且使用我们的测试框架对 Kylin 实例通过 Kylin API/JDBC/CLI 等方式进行交互,以测试 Kylin 的功能完备性。我们已经完成了自动化测试平台基础框架的开发,目前正在补充相关的测试用例。

技术分享

Apache Kylin 3.1.1

十月上半月主要在 Kylin 3.1.1 的发布工作,包括文档的补充,Bug 修复,回归测试等。Kylin 3.1.1 已经于 10 月 18 日正式发布。

开源活动

这两个月我们参加了 2 个开源相关的活动:

  • 2020 中国开源年会(COSCon '20) :我们参与了由开源社主办 2020 中国开源年会,相关的视频请点击这里查看。

  • 2020 云计算开源产业大会:我们参加了由中国信息通信研究院主办的 2020 云计算开源产业大会。此次大会中,Apache Kylin 项目荣获「OSCAR 尖峰开源社区及开源项目奖」,Apache Kylin PMC Chair 史少锋荣获「OSCAR 尖峰开源人物奖」。大会相关的介绍请查看 Apache Kylin 团队与个人荣获 OSCAR 尖峰开源项目与人物奖项



Next Month

12 月我们将持续进行 Kylin 4.0.0 Beta 相关的开发工作,如 Cube Planner 的设计与开发、Cube Migration Tool 的开发等等;除此以外,我们将在 12 月 19 号举办 Kylin 5 周年活动,欢迎大家参加,详情请查看 apachekylin 公众号文章 Five Years & Accelerating

  • No labels