Kyligence DeepInsight AI 深度洞察 - 首个企业级自主深度推理和洞察产品发布 立即了解更多

Kyligence 正式发布智能大数据分析平台(KAP)2.1

Kyligence 智能大数据分析平台 (Kyligence Analytics Platform, KAP) 是基于 Apache Kylin 的,在超大规模数据集上提供亚秒级分析能力的企业级数据仓库产品,为业务用户、分析师及工程师提供简单、快捷的大数据分析服务。在继承 Apache Kylin 的高性能查询,易用建模,JDBC/ODBC 协议支持,非侵入式架构等突出优点的同时,KAP 在企业用户所关注的实施效率、安全可控、性能优化、自助式敏捷 BI、系统监控等方面进行了全方位的创新。

今日,Kyligence 正式发布 KAP 2.1 版本。该版本不仅包含了 Apache Kylin 最新的功能并修复了大量bug,还全新引入了新组件 KyStorage、KyAnalyzer 和集成 KyBot 服务,并在稳定性、易用性等方面有大量改进,进一步降低了企业用户实施落地的复杂度,提升了生产率,产品经过了大量内外部早期客户的验证,稳定可靠。

Kyligence 同步发布标准企业版 (KAP) 和高级企业版 (KAP Plus),KAP Plus 采用全新 KyStorage 存储引擎,为企业用户提供更好的查询性能,能够支持明细数据查询。

以下为全新的 KAP 产品矩阵图:

此次 KAP 2.1 发布的两大核心组件:

KyStorage:KyStorage 是 Kyligence 基于 HDFS 全新研发的拥有自主知识产权的列式存储引擎,替换了 Apache Kylin 所采用的 HBase,相对于 Apache Kylin,查询性能有几倍到几十倍的提升,存储空间节省超过 50%,并全面支持明细数据的查询。

KyAnalyzer:KyAnalyzer 是 Kyligence研发的敏捷 BI 工具,支持大量可视化组件,允许交互式地报表设计,极大提升数据好分析的效率。

以下为本次 KAP 重大更新和升级内容:

Apache Kylin Core 升级
KAP 2.1 基于 Apache Kylin 1.5.4.1 版本,并修复了若干 bug,稳定性更好,主要新功能包括:
1. 支持 SQL Window/Grouping Sets 操作
2. 支持超大规模数据集上精确 Distinct Count 计算
3. 优化 TopN 度量,支持更多维度
4. 修复 100+ JIRA

KyStorage 列式存储引擎
KyStorage 是 Kyligence 基于 HDFS 全新研发的拥有自主知识产权的列式存储引擎,主要更新包:
1. 基于列式存储技术和多路复合索引等索引和编码技术,提升查询性能,并针对超高级维度、复杂过滤条件等场景做了专门优化,使得查询性能有 3 到 40 倍提升,存储空间更加节省。
2. 支持明细数据查询。KyStorage 突破了传统 OLAP 引擎仅能查询聚合数据的局限,全面地支持了明细数据的查询。
3. 优化了对宽表的支持。降低了数据建模的难度,更好地服务数据探索式分析场景。

KAP vs Kylin 聚合查询性能对比(越短越好)

KAP vs Kylin 明细查询和超高基数维度查询(越短越好)

KyAnalyzer 敏捷 BI 自助多维分析工具
KyAnalyzer 是 Kyligence 研发的敏捷 BI 工具,为用户提供开箱即用的自助多位分析能力,允许用户以熟悉的可拖拽的方式探索数据源,支持钻取细节,制作报表,报表分享等功能,主要更新包括:
1. 支持一键同步 KAP/Kylin 数据 Cube 模型
2. 统一集成 KAP 的访问认证系统
3. 支持报表导出为链接,简化报表集成

集成 KyBot 客户端
KyBot 是 Kyligence 提供的在线智能诊断和优化服务,为 Apache Kylin 和 KAP 系统提供监控、性能优化、智能诊断等自助服务。KyBot 客户端简化运维人员收集运行状态信息,降低运维成本。

更多企业级功能
1. 支持单元格级别访问控制。突破传统 Kylin 只能支持项目和 Cube 级别的访问权限控制,提供单元格级别的访问控制能力,允许与用户已有账号、权限、组织结构系统深度集成,从而实现对行、列、单元格的访问权限管理。
2. 支持 Percentile 等分析函数
3. 支持 Job Server 高可用部署

Hadoop 发行版
Kyligenec 为 KAP 及 Apache Kylin 提供了相应的兼容性测试,与合作伙伴一起完成相关的产品认证,支持所有主流 Hadoop 发行版。

通过产品认证:
Cloudera CDH 5.7/5.8

通过兼容性测试:
Apache Hadoop 2.2+,HBase 0.98+,Hive 0.14+
Hortonworks HDP 2.2/2.3/2.4
Microsoft HDInsight
Amazon EMR
华为 FusionInsight C50/C60
亚信 OCDP 2.4

 

关于 Kyligence

上海跬智信息技术有限公司 (Kyligence) 是由 Apache Kylin (唯一来自中国的 Apache 软件基金会顶级开源项目)核心团队组建,专注于大数据分析领域创新的数据科技公司。公司致力于进一步推动Apache Kylin 开源项目的发展和演进,拓展全球用户社区;提供基于 Apache Kylin 的下一代企业级数据仓库及商务智能大数据分析平台和解决方案,从私有部署到云计算平台,都能使用户在超大规模数据集上获得极速的洞察能力,以释放数据价值,驱动业务增⻓。

“Apache and Apache Kylin are either registered trademarks or trademarks of The Apache Software Foundation in the US and/or other countries. No endorsement by The Apache Software Foundation is implied by the use of these marks.”

添加企微

kyligence
关注我们

kyligence