【IT168 云计算】阿里双11结束了,全球“剁手族”们在享受了酣畅淋漓的大抢购之后,成就了2015阿里双11逆天的交易额912.17亿元人民币。然而,在巨大的消费数字背后,计算成为了巨大的支撑力量,帮助阿里顺利通过双11大考,这不仅是一个购物的节日,更是一场计算的盛宴。
引用阿里巴巴双11技术总指挥刘振飞的话说,双11不仅是一场全球消费者的狂欢,也是对中国互联网技术体系的实力检验。阿里技术人能够用世界级的技术创新,支撑世界级的经济现象,无疑是非常幸运的。“异地多活、金融级海量关系型数据库、全站HTTPS访问、世界级大体量的混合云架构,这四个是今年阿里双11非常大的创新,这背后需要强大的组织能力和技术积累,这不仅是阿里的骄傲,也是互联网的骄傲。”
纵观阿里官方对外宣布的众多创新技术点,有几个即将通过阿里云向外界提供的服务技术十分抢眼。通过阿里之前的自研,此次通过史上最大规模的双11大考,无疑在向外界证明,这些服务完备的可用性与稳定性。可以预见,通过阿里云未来逐步开放的这些技术能力,定将为全球用户带来更加强大的计算力量。
ODPS-StreamSQL:让未来实时计算更顺畅
开放数据处理服务(Open Data Processing Service, 简称ODPS)是由阿里云自主研发,提供针对TB/PB级数据、实时性要求不高的分布式处理能力,应用于数据分析、挖掘、商业智能等领域。阿里巴巴的离线数据业务都运行在ODPS上。其“海量运算””开箱即用”、“安全防护到位”、“按量付费”等特点,使得其保证了阿里云用户可以轻松实现大数据的顺利运行,一劳永逸的解决数据烦恼。
今年双11,淘宝、天猫、支付宝、菜鸟等所有大数据处理工作,都将由阿里云ODPS来完成。在刚刚结束的2015世界Sort Benchmark排序比赛中,阿里云ODPS用377秒完成了100TB的数据排序,打破了此前Apache Spark创造的1406秒纪录,一举创造4项世界纪录。ODPS根据用户实际的存储和计算消耗收费,最大化的降低用户的数据使用成本。目前,国内首家将核心系统放在云上的基金公司-天弘基金与首家互联网保险公司-众安保险都是阿里云ODPS的用户。
ODPS的实时计算系统StreamSQL在今年的双11技术支撑过程表现抢眼,据阿里内部对外宣布,双11当天通过StreamSQL系统,交易系统预计日消息处理量将达上万亿条。据了解,阿里云StreamSQL系统是一款秒级实时流计算产品,用户可以直接在SQL编程里使用。在今年7月北京举办的“阿里云分享日X云栖大会”上,阿里云资深总监李津正式发布了这款产品,作为分析型数据库,它可以完成海量数据的实时多维分析,实现海量数据多维比对和碰撞。而这一产品在刚刚过去的双11过程中得到了充分的检验,并且成绩优异,而这一能力,正在通过阿里云逐步开放出来。
dataV:让数据分析也进入“读图”时代
在阿里巴巴每天海量的交易面前,如何精准把握由数据脉搏带来的趋势也成为极大的挑战。
对此,阿里巴巴自主研发了dataV数据可视化引擎,该引擎完全基于Web 技术 ,可快速、低成本的部署。用于内部的商品、交易、支付、数据中心等的可视化呈现和管理,帮助实现更精准的调控。
自2013年起,双11交易数据大屏成为对外直播狂欢节的重要窗口,而在2015年的全球狂欢节上,这一树立在水立方的巨型数据大屏,以实时动态可视图的方式向全球用户直播了双11的数据魅力。
据悉,水立方数据大屏上,该数据可视化引擎既可以利用3D webgl技术从宏观角度展示双十一平台总体交易订单实时流向的全量展示,也可以通过便捷的交互手段,深入到城市级别进行微观的人群画像分析。
目前,这一技术已计划通过阿里云向外输出,很快将会有标准化产品推出。
OceanBase:中国自研数据库正式崛起
双11当天,刘振飞在接受媒体采访时的一段话触动了很多人:“我上大学的时候,我的导师跟我说,中国有三个IT技术没有办法突破,一个是操作系统,第二是数据库,第三是芯片,今天可以非常自豪地说,在阿里起码把数据库这个问题解决掉了,我们终于有了完全自主可控的数据库。”
没错,五年前阿里巴巴就开始打造自主可控的数据库产品OceanBase,2014年其支撑了10%的双11交易流量,而今年双11的核心交易流量,100%都由OceanBase来承载。很明显,阿里这一举动将对全球IT业的格局产生深远影响。
由于对硬件设备能力和软件许可的弱需求,通过OceanBase可以比采用传统商业数据库节约50%的成本。同时,分布式的系统,可以更好地应对双11这类大流量冲击:弹性能力可保证大促之前完成一键扩容、大促之后实现一键缩容,并且性能方面已经完全符合金融级海量数据库标准。
据阿里内部数据显示,双11当天,蚂蚁金服旗下的支付宝平稳支撑起了8.59万笔/秒的交易峰值,是去年双十一峰值3.85万笔/秒的2.23倍。这一数字大幅超越了Visa和MasterCard的实际处理能力,甚至比二者的实验室数据都要高出一大截。这意味着经历了双十一大考的中国支付系统,在技术上已大幅领先全球。而后台起到关键支撑作用的秘密武器就是 Oceanbase。
作为中国首个具有自主知识产权的数据库,也是全球首个应用在金融业务的分布式关系数据库。OceanBase计划明年可以通过阿里云的公共计算平台对外界开放。