腾讯云98.8秒处理100TB数据创造新纪录

　　11月10日，有计算奥运会之称的Sort Benchmark全球排序竞赛公布了2016年最终成绩，腾讯云大数据联合团队用时仅仅98.8秒，就就完成了100TB的数据排序。

　　这打破了阿里云去年创造的329秒纪录，而在更早的时候，百度曾经的纪录是716秒，Hadoop的纪录是4222秒。

　　全球大数据性能进化史

　　在这次竞赛中，腾讯云数智分布式计算平台夺得了GraySort、MinuteSort两个项目的冠军，同时创造四项世界纪录，将阿里云去年的纪录整体提高了2-5倍。

　　GraySort项目比的是如何在最短的时间内将总量100TB的1万亿条无序100字节纪录，从小到大进行排序。腾讯云用时98.8秒完成，相当于每分钟处理60.7TB，而去年冠军的成绩是18.2TB/分钟。

　　MinuteSort比的则是在1分钟之内能够完成多少数据量的排序。腾讯云的成绩是55TB，而去年只有11TB。

　　Sort Benchmark通过排序竞赛考量一家公司或机构大规模计算能力的综合实力，通过排序这个最基本的计算问题，不仅全面评测分布式系统软件架构能力(如海量数据分布式存储、计算任务切片调度、节点通信协调同步、数据计算监控容灾等性能)，也评测了硬件架构能力(如服务器硬件选配、网络架构调优、IDC规划建设能力等)。

　　为了参加此次竞赛，腾讯云大数据联合团队在基础架构上采用了512台IBM OpenPower服务器和迈络思公司的100Gb互联技术。

（编辑：佛山站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!