a&s专业的自动化&安全生态服务平台
公众号
安全自动化

安全自动化

安防知识网

安防知识网

手机站
手机站

手机站

大安防供需平台
大安防供需平台

大安防供需平台

资讯频道横幅A1
首页 > 资讯 > 正文

腾讯云世界第一 98.8秒处理100TB数据

11月10日,有计算奥运会之称的Sort Benchmark全球排序竞赛公布了2016年最终成绩,腾讯云大数据联合团队用时仅仅98.8秒,就就完成了100TB的数据排序。
资讯频道文章B
  进入DT时代后,云存储凭借其容量大的优势迅速成为互联网企业竞相角逐的大方向,海量数据的出现,随着产生的数据处理的能力同时成为竞争点。

  11月10日,有计算奥运会之称的Sort Benchmark全球排序竞赛公布了2016年最终成绩,腾讯云大数据联合团队用时仅仅98.8秒,就就完成了100TB的数据排序。

  这打破了阿里云去年创造的329秒纪录,而在更早的时候,百度曾经的纪录是716秒,Hadoop的纪录是4222秒。

全球大数据性能进化史

  在这次竞赛中,腾讯云数智分布式计算平台夺得了GraySort、MinuteSort两个项目的冠军,同时创造四项世界纪录,将阿里云去年的纪录整体提高了2-5倍。

  GraySort项目比的是如何在最短的时间内将总量100TB的1万亿条无序100字节纪录,从小到大进行排序。腾讯云用时98.8秒完成,相当于每分钟处理60.7TB,而去年冠军的成绩是18.2TB/分钟。

  MinuteSort比的则是在1分钟之内能够完成多少数据量的排序。腾讯云的成绩是55TB,而去年只有11TB。

  Sort Benchmark通过排序竞赛考量一家公司或机构大规模计算能力的综合实力,通过排序这个最基本的计算问题,不仅全面评测分布式系统软件架构能力(如海量数据分布式存储、计算任务切片调度、节点通信协调同步、数据计算监控容灾等性能),也评测了硬件架构能力(如服务器硬件选配、网络架构调优、IDC规划建设能力等)。

  为了参加此次竞赛,腾讯云大数据联合团队在基础架构上采用了512台IBM OpenPower服务器和迈络思公司的100Gb互联技术。

参与评论
回复:
0/300
文明上网理性发言,评论区仅供其表达个人看法,并不表明a&s观点。
0
关于我们

a&s是国际知名展览公司——德国法兰克福展览集团旗下专业的自动化&安全生态服务平台,为智慧安防、智慧生活、智能交通、智能建筑、IT通讯&网络等从业者提供市场分析、技术资讯、方案评估、行业预测等,为读者搭建专业的行业交流平台。

免责声明:本站所使用的字体和图片文字等素材部分来源于互联网共享平台。如使用任何字体和图片文字有冒犯其版权所有方的,皆为无意。如您是字体厂商、图片文字厂商等版权方,且不允许本站使用您的字体和图片文字等素材,请联系我们,本站核实后将立即删除!任何版权方从未通知联系本站管理者停止使用,并索要赔偿或上诉法院的,均视为新型网络碰瓷及敲诈勒索,将不予任何的法律和经济赔偿!敬请谅解!
© 2020 Messe Frankfurt (Shenzhen) Co., Ltd, All rights reserved.
法兰克福展览(深圳)有限公司版权所有 粤ICP备12072668号 粤公网安备 44030402000264号
用户
反馈