Kyligence 智能大数据分析平台（KAP）2.3 正式发布

Kyligence 智能大数据分析平台 (Kyligence Analytics Platform, KAP) 是基于 Apache Kylin 的，在超大规模数据集上提供亚秒级分析能力的企业级数据仓库产品，为业务用户、分析师及工程师提供简单、快捷的大数据分析服务。在继承 Apache Kylin 的高性能查询，易用建模，JDBC/ODBC 协议支持，非侵入式架构等突出优点的同时，KAP 在企业用户所关注的实施效率、安全可控、性能优化、自助式敏捷 BI、系统监控等方面进行了全方位的创新。

近日，Kyligence 正式发布了 KAP 2.3 版本。该版本增强了建模流程的智能性，并全面优化了存储引擎（Kystorage），改进了 Kafka Topic 导入流程，还支持超大结果集的异步导出。

Kyligence Analytics Platform 包含标准企业版 (KAP) 和高级企业版 (KAP Plus)，KAP Plus 采用自主 KyStorage 列式存储引擎，为企业用户提供更好的查询性能，能够支持明细数据查询。

KAP 2.3 核心创新点

智能的辅助建模。 在模型构建时，KAP 将根据数据源表结构特征智能地为用户推荐不同的维度和度量设置，极大地简化了 建模的操作，提升系统易用性。同时，还支持支持超大规模表的轻量级采样与统计，为建模过程提供数据特征采样支持。

全面优化存储引擎 KyStorage。 内置配置调优工具，自动根据集群环境规模，推荐最优配置。默认启用 snappy 存储压缩， 更加节省存储空间。下压过滤算子，提升过滤类查询效率 20% 以上。支持动态分配查询节点（即 Spark 节点）计算资源，允许根据查询请求负载程度自适应分配集群资源。

改进的 Kafka Topic 导入流程。支持 Kafka 为核心数据源，一键式导入 Topic，流数据采样，方便用户集成流数据解决方案。

支持超大结果集异步导出。允许用户提交异步查询请求，检查查询进度，支持导出千万级别以上查询结果集，KAP 可以用于数据预处理系统。

其它更新还包括

简化诊断包生成和上传流程，支持一键上传 KyBot 诊断包。
简化 Kylin 到 KAP 迁移过程，支持一键式升级。
升级 Cube 膨胀率计算方法，新方法更合理，数据用户可验证。
支持集成用户环境的 Spark 集群，简化了集群的管理。
支持多种云端 Hadoop 文件系统作为 Kylin 工作目录。

关于 Kyligence

上海跬智信息技术有限公司 (Kyligence) 是由 Apache Kylin (首个来自中国的 Apache 软件基金会顶级开源项目)核心团队组建，专注于大数据分析领域创新的数据科技公司。公司致力于进一步推动 Apache Kylin 开源项目的发展和演进，拓展全球用户社区；提供基于 Apache Kylin 的下一代企业级数据仓库及商务智能大数据分析平台和解决方案，从私有部署到云计算平台，都能使用户在超大规模数据集上获得极速的洞察能力，以释放数据价值，驱动业务增⻓。

“Apache and Apache Kylin are either registered trademarks or trademarks of The Apache Software Foundation in the US and/or other countries. No endorsement by The Apache Software Foundation is implied by the use of these marks.”