在流数据处理方面,启元世界使用了Amazon Kinesis云原生流数据全栈解决方案,解决了游戏中的数据收集、分析、归档的问题,提升了运维敏捷性和性能。最终,流数据处理系统部署时间从天级缩短到分钟级,并能够轻松承载百万 QPS。
在批处理方面,启元世界采用了Amazon EMR 和亚马逊云科技托管的 Apache Airflow,可以轻松构建和管理数据分析集群,批处理运行的时间减少了80%。在不改变采用开源组件开发体验的前提下,运营总成本下降了50%,能够承载的查询数量与复杂度上升了数倍。
在即席查询方面,由于不同分析工具中有统一的源数据管理以及安全管控,启元世界使用了亚马逊云科技的Glue / Athena / QuickSight,业务人员可以进行自助式查询,无需麻烦数据开发部门,即可完成秒级响应各种数据查询及分析请求,数据报表生成速度加快一倍。