首页 云计算

不仅是飞天,十年前王坚还打造了世界级大数据计算平台MaxCompute

王坚是一名理想主义者,很多人熟悉他是因为阿里云、城市大脑,却鲜有人知道他还打造了世界级的大数据计算平台MaxCompute。

MaxCompute现在是全球领先的大数据计算平台,数据规模达EB级,6小时可处理100PB数据,相当于1亿部高清电影。除阿里云外,全球掌握这种能力的公司仅有Google、亚马逊等少数几家。

但十年前,大多数人还不清楚“大数据”是什么、有什么用,王坚却已经洞察大数据的潜力,一早扛起了发展大数据的旗帜。

彼时,阿里巴巴正遭遇其他公司无法想象的难题,由于淘宝流量爆发式增长,业界通用的Hadoop集群不堪重负。

继续在开源的Hadoop上改进还是完全自研一套自己的大数据技术?

王坚果断地选择了后者:自研MaxCompute!

他认为,阿里云想做的事情可以解读为Amazon+Google并有所超越。不仅要做MaxCompute,还要把它的单一集群机器数量做到数千甚至更高,才能掌握大数据计算领域的前沿关键技术。

2009年到2013年,是阿里云面临内外争议最多的时候,但王坚力排众议,顶住压力,终于在2013年8月15日这天,将MaxCompute的生产集群推上了5000台规模。

这对阿里云来说意义非凡,阿里云成为世界上第一个对外提供5K计算能力的科技公司(目前已经做到单一集群超过1万台服务器),计算能力获得跨越式的进步,为未来的大规模服务奠定基础。而同时,这家公司也作为当时极少的中国力量站到了世界前沿技术的舞台。

MaxCompute的计算能力像火箭般蹿升:

在 2015、 2016 年 Sort Benchmark 数据计算能力评测中,阿里云MaxCompute一举刷新了 6 项世界记录。

2017年,MaxCompute在大数据计算能力上的新突破:将BigBench数据规模扩展到100T,完成全球首个公共云上的BigBench大数据基准测试。

2018年,Forrester发布的《The Forrester WaveTM: CloudData Warehouse, Q4 2018》中,阿里云MaxCompute、DataWorks、ADB等三款产品成功入选,并在产品功能(Current Offering)方面力压微软,杀入前七。

很久前,王坚就认为,因为互联网这个基础设施的存在,数据就像土地、石油一样,会成为生产资料。

不仅阿里巴巴依靠MaxCompute支撑住了双11的海量数据、为数据中台等提供了坚实基础,更多外部的中小型公司也只需要花几百元就可以分析海量数据,大大降低了技术的应用门槛。

回头再看十年前,如果当时没有坚定地投入MaxCompute,恐怕今天的淘宝、天猫也远远达不到现在的规模,而更多互联网公司也难以赶上数据爆发后带来的业务红利。

官方微博/微信

每日头条、业界资讯、热点资讯、八卦爆料,全天跟踪微博播报。各种爆料、内幕、花边、资讯一网打尽。百万互联网粉丝互动参与,TechWeb官方微博期待您的关注。

↑扫描二维码

想在手机上看科技资讯和科技八卦吗?

想第一时间看独家爆料和深度报道吗?

请关注TechWeb官方微信公众帐号:

1.用手机扫左侧二维码;

2.在添加朋友里,搜索关注TechWeb。

手机游戏更多