100TB!阿里云计算创造BigBench全球性能记录
程序员文章站
2022-03-15 13:56:07
10月12日的杭州云栖大会上,阿里巴巴集团副总裁周靖人发布了阿里云在大数据计算能力上的新突破:bigbench数据规模首次扩展到100t;流计算2.0每秒峰值达千万qp...
10月12日的杭州云栖大会上,阿里巴巴集团副总裁周靖人发布了阿里云在大数据计算能力上的新突破:bigbench数据规模首次扩展到100t;流计算2.0每秒峰值达千万qps,整体链路延时亚秒级;e-mapreduce对比同类产品平均性能提升3倍。
其中,tpcx-bigbench是面向大数据的端到端基准测试项目,在行业内拥有非常高的权威地位。目前,tpc官网公布的测试最大规模为10tb,最佳性能是1491.23bbqpm。
阿里云与intel合作,基于后者的最新可扩展至强平台、公共云发布的bigbench on maxcompute+pai,全球范围内首次将bigbench测试规模拓展到100tb,瞬间提高了是被,同时最佳性能达到7000bbqpm,猛增3.7倍,同时这也是首个基于公共云服务的benchmark。
intel数据中心事业部副总裁robert hays也在现场见证了这一奇迹。
大会结束后,maxcompute会在公共云开放一个月的测试环境,并开源bigbench on maxcompute+pai sdk,供开发者验证试用。
maxcompute拥有强悍的海量数据处理能力、机器学习算法效率,基于阿里云自主研发的分布式操作系统“飞天”,单集群服务器规模可超过1万台,数据规模达到eb(百万tb)级别,还与intel合作进行了深度软硬结合优化。
延伸阅读:
上一篇: linux下安装jdk