助力 AppZen 实现云上高并发数据分析

项目背景

AppZen 的客户数据以全托管的模式存放在亚马逊云科技(AWS)上,随着业务的快速发展,客户数据迅速累积,客户对这些数据也提出了越来越高的访问需求,建立一个 DaaS 平台迫在眉睫。该企业需要将这些数据按照客户需求提供高性能的访问 API 以及各类分析报告,从而提高客户满意度,增加用户黏性;另一方面,该企业希望通过为客户提供增值服务找到新的业务增长点,创造更多营收。

Kyligence Cloud

一站式云数据服务与管理平台

Kyligence Cloud

云原生智能多维数据库平台

Kyligence Cloud 平台为客户提供了:

 

- 数据湖/云端数据源的对接。支持直接对接云上的数据源,比如说 Amazon S3 、Amazon RDS、Amazon Redshift 工作区的创建和管理。

 

- 可以满足多租户的需求。集群部署/监控/伸缩。部署时间不超过 5 分钟。- 数据建模/智能加速。Kyligence Cloud 具有 AI 增强的分析模式,用户不仅可以便捷地创建业务分析模型,而且能对不同的查询智能加速。

 

- 数据洞察/自助服务。通过 Kyligence Insight,或利用 MDX 接口连接到不同分析系统获得洞察。

成果与客户反馈

引入新技术 Apache Hudi,支持在海量数据集上进行准实时修改,并保证原子性;


集成 Alluxio 分布式缓存,把热数据 Cache 在内存或者本地磁盘中,把冷数据存储在 S3 中。提高查询访问性能的同时,也减少了对 S3 API 的调用,减少网络带宽使用,从而进一步帮助节省成本;


读写分离,采用两个独立 Spark 集群,一个用于数据加工,另一个用于在线查询,彼此互不干扰,保证服务 SLA;


Airflow 全自动的调度,最终做到端到端的增量数据更新延迟小于 1 小时;


数据不出 VPC,所有计算都在客户的 VPC 内,保证了高安全性。

即刻体验智能多维数据库

免费试用 产品下载