我相信在与会的各位专家和各位从业精英的积极投入和参与下，AI的发展必将朝气蓬勃、势不可挡！最后预祝大会圆满成功！谢谢！

演讲主题：Sort Benchmark夺冠背后

演讲人：蒋杰腾讯数据平台部总经理

大家好，很多人已经知道腾讯获得了今年的Sort benchmark的排序的4项冠军，很多朋友来问我，腾讯是怎么做到的，背后支撑的究竟是什么样的技术？今天，我借这个机会，跟大伙来讲讲背后的一些故事。

相信很多人看过我们在很多城市机场投放的这个广告，这个广告里面画的是一个赛跑的选手，排序比赛，就跟奥运会的百米赛跑一样，都要很快。但我想说的是，其实我们更像一个长跑选手，我们在跑马拉松，这场马拉松，我们跑了7年。

回顾过去几年的比赛的成绩，几年前冠军都是被美国企业垄断的，最近三年则是BAT拿了冠军。应该说，这几年，国内互联网的发展速度不比美国慢，与此同时，以BAT为代表的国内互联网企业的计算能力也不落后于美国。

过去几年，获得冠军的团队，用的基本上都是Hadoop和Spark，其实腾讯的大数据平台，也是始于Hadoop的。

我们之所以能获得四项的冠军，是我们经历了几年的打磨，追求极致，我们希望最大限度地压榨机器的性能。

首先，从成本的角度，只有把硬件压榨到极致，成本才会低。我们采用的是OpenPower架构的机器，按节点数计算，我们规模只有去年冠军的六份一，按照今年的硬件价格，我们总的TCO成本远低于去年冠军。

在调度层面，我们对调度算法做了深度优化，使得每台机器的CPU、内存、网络、磁盘IO等每个环节都能发挥到极致。本次比赛的其中两项为MinuteSort，比拼的就是一分钟内的排序数据量，这个时间调度的效率就变得非常重要，而这两项比赛我们比去年提升了5倍，是提升幅度最高的；这也从另一个方面说明了我们在调度效率上的领先性。总结为一句话，就是最大限度地压榨了硬件的性能，才让我们取得这个成绩。

目前我们用于比赛的这个集群，已经在我们的现网中用起来了，在高性能计算、图计算、深度学习等领域支撑腾讯的现网应用。

回顾我们走过的7年，我们是2009年1月开始基于Hadoop来开发我们的大数据平台，七年的征程，我们历经了3代平台的发展。

2009-2011年是我们的第一代平台，我们的第一代平台，只支持批量计算的场景，主要就是报表，这个过程，我们重点发展了平台的可扩展性，我们不断增大集群的规模，从09年的几十台，发展到现在总规模接近3万台。总结成几个字，第一代就是规模化。

第二代，用三个字总结就是实时化。这是2012年到2014年。主要支持在线分析和实时计算的场景，比如实时报表，实时查询、实时监控等。

第三代是去年到现在，主要建设机器学习平台，支持腾讯各业务数据挖掘的需求。这是从数据分析到数据挖掘的转变，三个字总结就是“智能化”。