没有马云的第一次“光明顶”决战 | 猛哥

1

 
 

马云爱金庸。

2018年10月金庸驾鹤西去后,他深情悼念:若无先生,不知是否会有阿里。

故而,阿里有浓浓的江湖气。员工入职须取花名,就连会议室的名字也都是满满的武侠套路,其中就有一个“光明顶”。

这个会议室位于阿里西溪园区1号楼7楼,屋内有一块硕大的屏幕,实时播报阿里各项核心数据,属于绝密之地。

每逢双11,“光明顶”就被征用为临时作战中心。整个阿里大约11万人,能有资格入内者不足200人。

 

 

2

 

 

2019年的双11颇不寻常。

这是张勇接棒后的第一届双11。尽管他11年前“发明”了双11这个神奇的物种,但今夕不同往日,阿里太瞩目了,他已经完全站在了聚光灯下,举手投足都会被无限放大。

如,11月4日,王兴在饭否上发文,“你这一招已经用老了”,逍遥子闻言不禁一怔,十年了,第一次有人敢这么说他的“不老长春功”。他忍不住仔细打量起这个骨骼清奇的黄姓少年。

明眼人一看就知道神马意思。

逍遥子,自然指张勇,他在阿里花名正是“逍遥子”。

黄姓少年,显然指黄峥。

因为阿里和美团的那点陈年往事(简述即:阿里先是美团的恩客,曾如胶似漆。后来美团不想只交阿里,还想双宿腾讯,阿里怒退,祭出口碑和饿了么,梁子结下),王兴就变成了祥林嫂,逮到机会就出来恶心阿里一把。

7个月前,王兴在朋友圈写道,接下来几年淘宝、天猫主要对手是拼多多,若蒋凡能够带领淘宝打赢拼多多黄峥,则“无愧”成为阿里CEO接班人,如果他有兴趣干这活的话。

这几句话蛮有心计。一方面,把蒋凡架在火上烤,大厂接班人话题向来敏感;另一方面,挑唆阿里与拼多多缠斗,无暇顾及本地生活服务战场。

吃瓜群众看热闹不嫌事大 ,但肯定有一个人不高兴。那就是京东少帅徐雷。王兴明显看不起人嘛 。

无论剧本将来怎么写。2019年双11是中国电商领域三个80后的第一次正面斗法。

蒋凡,阿里最年轻合伙人,淘宝总裁兼天猫总裁,首次接受双11大考。

徐雷,京东的台柱子,大强子折戟明尼苏达后,他带领京东商城艰难走出泥沼。

黄峥,3年就把拼多多折腾上市,但山寨不能继续说服华尔街,现正从五环外往五环内厮杀。

谁都不容有失。

蒋凡最难,左举天猫战京东,右擎聚划算狙拼多多。

 

 

3

 

 

双11。

无论你是投入,还是旁观,抑或反感,它都已经成为一种社会现象——全球最多人数参与的消费主义狂欢。

《消费社会》的作者鲍德里亚 (Jean Baudrillard) 认为消费构成当下社会的内在逻辑,包括:商品消费面前人人平等;消费不仅仅体现在物质文化上,更体现在文化含义上,消费体现个人身份;消费的不是商品和服务的使用价值,而是它们的符号象征意义。

按照文化研究观点,消费主义被视为是一种获得愉悦的活动形式。

在挖掘内需无比重要的当下,阿里已经把双11之夜办成了一场堪比春晚的盛会,群星璀璨。不出意料,今年双11的成交额肯定再创记录。

数百万品牌参与,上下游则是牵动了千万级企业。没有任何一个商业行为会如此兴师动众。那这背后究竟靠什么在支撑?

 

 

4

 

每年,为了应对“双11”,阿里都会成立集团技术大促小分队,由集团各个BU的上千名工程师组成,并且任命技术团部以及大队长。

今年的团长是平畴,他才来阿里四个月,负责新零售技术事业群淘系技术部,他原来是爱奇艺CTO。

平畴在中国科技大学获得计算机博士学位,先后供职于英特尔、谷歌,也许是因为竞业限制条款,加盟阿里后,没有协同阿里副总裁、大文娱事业群CTO兼优酷CEO南天。

有意思的是,南天之前是淘宝资深技术总监,2011年开始连续三年担任天猫双11技术负责人。

平畴下面有四个大队长。

霜波,新零售技术事业群技术质量部负责人,连续四年担任双11技术大队长,她是东南大学计算机研究生,专攻软件测试,后又去美国的林肯大学读博。2008年入职阿里,现在是阿里女工程师的旗帜。

道延,新零售技术事业群安全生产负责人。(抱歉,这人太低调了,资料不详)

叔同,阿里云云原生应用平台负责人,2010年加入淘宝网,9次参与双11作战,双11稳定性负责人。

四虎,新零售技术事业群营销平台负责人。他高中时候买过一双皮鞋,没走到家就破了,痛恨假货。后来在UT斯达康工作时,知道了淘宝,还能写评价,觉得这才是未来,于是降薪加入阿里。

再往下,49个BU分别有队长和副队长。

架构宛如金字塔,团长及大队长们一声令下,任务层层分解,如臂使指。

 

 

5

 

 

2019年11月10日上午9时,阿里“技术天团”陆续进入“光明顶”,如临大敌。

因为这是阿里核心系统全栈上云后的第一次双11。

说人话就是:阿里把所有核心业务全部搬到阿里云上了。

马云曾说,到2036年,阿里要成为全球第五大经济体。尽管还有17年,但现在阿里市值接近5000亿美金,偌大的体量全部运行在公共云上,商业史上还是头一遭。

只能感叹:张勇真是胆大,张建锋真是对阿里云迷之自信。

张建锋,花名行癫,阿里CTO兼阿里云总裁。2019年春节刚过,他召集各个条线的技术大佬们开会,提出:“从此刻开始,全集团不再购进一台物理机,所有新增计算力全部上阿里云”。

不接受反驳。

历史如此相似。2010年,时任阿里CTO王坚宣布:“从今年开始,淘宝不再采购小型机”。

同样不接受反驳。就此拉开了阿里”去IOE“的大幕。

两句话,两代阿里云的掌舵者完成了隔空技术大会师。

王坚现在是阿里技术委员会主席。据行业媒体报道,2019年中国工程院院士增选名单已经出炉,尚等最后公示,王坚名列其中。

作为人工智能领域和企业界入选者,他PK掉李彦宏、王海峰(百度CTO)、沈向洋(微软全球执行副总裁)、杨强(微众银行首席人工智能官)等技术大牛,阿里云“飞天”操作系统是加分项。

关于“飞天”的故事已经太多。

概而言之如下:

伴随淘宝业务的飙升,对小型机(IBM)、数据库(甲骨文)以及存储设备(EMC)的采购需求也在飙升,按照这个速度计算,阿里会破产,因为采购费惊人。

小型机(IBM)、数据库(甲骨文)以及存储设备(EMC)合称“IOE”,是此前IT业的标准架构。

王坚反其道而行之,带领阿里工程师们“去IOE”,办法就是研发“飞天”,把全球数百万台计算机连成一台超级计算机,方便用户随时随地调用算力。

阿里云完全是从头造轮子,走了许多弯路。王坚及其团队在阿里内外屡遭嘲讽,磨难重重。2013年,阿里终于完成了“去IOE”。

“飞天”是中国唯一自主研发的计算引擎,是全球集群规模最大的计算平台,最大可扩展至10万台计算集群。

但云计算的底层技术是“虚拟化”,有一个“原罪”,那就是,经过虚拟化技术提供的算力是“打折”的。

“必须想办法把损耗降到0。”2016年双11的复盘大会上,张建锋点了旭卿的将。

旭卿,阿里云弹性计算技术负责人,他拉上阿里云副总裁李津一起“脑暴”。

李津,2012年双11一战成名。那年双11经历过“黑色一小时”,“光明顶”里某个人突然大喊自己下不了单,场面开始慌乱。技术团队最担心系统出现正向雪崩,整个交易链条崩溃。最先反应过来的人是李津,在一片惊恐中他拍案而起,让大家都别慌,交易和支付还在发生,任何人不许动。

作为“老司机”,这次李津又想出了一个软硬结合的方案。

以往解决路线都是让虚拟化软件去迁就CPU,而阿里云打算新造出一个带有智能芯片的专用板卡负责虚拟化调度,把CPU解放出来。

2017年10月12日,杭州云栖大会。阿里云发布神龙云服务器,并且可以提供现货。

神龙云服务器,解决了虚拟化技术算力损耗的问题。

飞天+神龙,让上云没有障碍。

 

 

6

 

 

阿里云对外声称,中国有84%的企业有意愿要上云。

有意愿不等于既成事实。信心比金子还宝贵。

怎么才能增加中国企业的信心?

把阿里的核心系统都搬上云!在中国,还没有一家企业的业务复杂度能超过阿里,如果阿里能安全平稳地在云上跑起来,其它企业自然不在话下。

那怎么才算证明阿里上云成功?

通过双11大考。

云计算从诞生之初就被认为是新型的数字基础设施,需要在任何情况下实现不间断的稳定服务。双11无疑就是最好的试验场。

双11的核心交易系统和导购链路极其复杂,涉及到上千个应用,尤其是双11零点时刻,如果阿里全栈上云后,能扛住洪峰一般涌来的流量,足以说明阿里云没毛病。

于是,全栈上云,被定为阿里2019年的超级工程。

 

 

7

 

 

2019年1月29日,春节将近。

阿里西溪园区显眼处的一块LED屏上打出一行字:“阿里巴巴经济体全站云化第一站倒计时140天”。

冲锋的号角吹响。

一张照片记录下当时的情景,张建锋和一众高管站在前排,一面武侠风十足的军令状展开在他们面前。

破釜沉舟,方能全力一搏。2019年4月,阿里发布了一条新的决定:集团上云,全部采用神龙云服务器架构。

“都在云上了,ALL IN CLOUD了,你就没有任何退路。”跃元说,他是今年双11阿里云技术队长。

这个小伙子蛮有意思。还在读大三时,就被大唐电信签下,两年后又被华为挖走。2014年,爱立信向他发出邀请,他却架不住朋友劝说,进入阿里云。

他形容双11就像一个奥运会,自己则是场馆建设的“包工头”和活动期间的“技术总指挥”,“我们得把各种场馆修建起来,能容纳那么多的人去看比赛,这个场馆你还得负责维护,入口、门禁、设计、看台的数量和承重,每一套设施都得建设和维护。”

阿里全面云化的第一站是618大促。

“当时是完成50%上云,我们准备了2分钟逃逸的预案。”霜波说。

一切正常。

接下来是9.9划算节,阿里电商的核心业务100%实现云化,结果风平浪静。

 

 

8

 

但双11的体量绝非618和99可比拟。

2019年10月上旬,霜波向张勇汇报双11的筹备情况和技术方案。

“技术风险太大了。”张勇说,他提出了一个“疯狂”的想法——制造技术故障,“突袭”工程师们,考验他们的应急保障能力。

行动高度保密,知晓人数不超过15人。

第一次突袭发生在10月19日凌晨一点多。在峰值流量压测的同时,阿里云资深技术专家万谊平带着七八个工程师下手非常“狠”,除了挂掉读写的服务器之外,还同时让张北数据中心的四个高效云盘之一直接宕机。

参与双11保障的上千名工程师全都蒙在鼓里,淘宝交易立即下跌了35%。突袭暴露出很多协同的问题

接下来又来了两轮突袭。最后一次是11月2日凌晨1点50分,距离双11仅10天,

“卧槽!”

100台神龙服务器集体宕机了。

阿里云资深技术专家杨航吓傻了。作为神龙团队的技术骨干,他深知,如果阿里是一驾飞机,神龙服务器就好比引擎。神龙服务器宕机,就是全局性的毁灭。

按照既定预案开始排查,2分钟后,他提到嗓子眼的心终于放了下去,“是系统误报,神龙没有问题!”

所有的捶打,都是为了等待那个不眠之夜。

 

 

9

 

 

“还有15分钟!”

2019年11月10日23点45分,“光明顶”,霜波发出提醒,现场立刻安静下来。

今年“技术天团”中新增了一张面孔。他就是贾扬清,在圈内人眼中,他是神一样的人物。

他经常给美国同学讲,在中国不需要带现金和信用卡出门,一个手机就够了。

美国同学就会问,手机没有电了怎么办?

他说,有共享充电宝啊。

贾扬清说这个故事就是产业。他2009年出国,那时还没有双11,2019年回国,中国已经发生了翻天覆地变化。

这次双11,他第一次下单抢购,也是第一次亲身参与双11的工作,他的团队为双11做了三件事:解决离线计算和在线计算的动态调配问题、流计算的问题,以及交互式查询的问题。

最让他兴奋的是,双11让阿里拧成一股绳子,办成了一个盛会。“双11是产业的胜利,绝无仅有。“

大神兴奋,那是因为头一遭。

可对于“技术天团”的“老司机”们而言,心情则是完全不同。每年双11前,他们都有纾解压力的规定动作,最常见的两种方式是拜佛和去西湖边散步。

11月8日,霜波就带领团队去永福寺烧香。

11月10日上午10点,蚂蚁金服的工程师们则是捧着关公像,一路走到“光明顶”。

窗外,园区灯火璀璨,媒体云集,“定胜鼓”间隔响起。

屋内,键盘的敲击声如大珠小珠落玉盘。

霜波的视线一直没离开数据大屏。

“目前,各项数据指标正常!”

“还有5分钟”

“还有1分钟”

她面色沉稳,语气平缓。

 

 

10

 

 

零点一到,流量洪峰以肉眼可见的速度暴涨。

数亿人同时点击按钮,移动设备信号光速飞向最近的信号基站。它们在居民楼旁边,在山上,在道路旁,在荒野中,甚至在雪山之巅。之后一串经过解析后的指令到达阿里的某一台神龙服务器上,它可能藏在千岛湖的水底。再经过了几千公里的传输后,最终到达了零下10度的阿里张北数据中心。

在数据中心,这些请求开始在此前设置好的库存、会员、营销、支付等应用间历险。经过一系列解析运算后它们又从原路返回,最终回到了数亿人的终端设备上。

一起超级事件就这样在二进制世界发生了,在不到一秒内,交易链路在云上发生了。它充满了陷阱,却又惊心动魄。

 

 

11

 

1分36秒,成交额100亿!

2019年天猫双11订单创建峰值又创纪录,达到54.4万笔/秒,是2009年第一次双11的1360倍。

“技术天团”没有丝毫欢欣。“光明顶”内度秒如年。

13分钟后,霜波通过连线,告知守候在“光明顶”外部同事,平稳度过峰值。

阿里对外宣布,其核心系统已100%跑在阿里云公共云上,“飞天”操作系统成功扛住全球最大规模的流量洪峰!

 

 

12

 

 

2684亿!

当秒针抵达2019年11月11日24时,天猫双11的成交额停格。

京东同步了11月1日至11日的总成价额——2044亿。尽管拼多多没有公布销售额, 不出意外,阿里又笑到了最后。

《倚天屠龙记》中,六大门派围攻“光明顶”失败,除了各自心怀鬼胎之外,张无忌的单挑能力是最大的胜负手。

而对阿里来说,阿里云就是他们的张无忌。但张无忌的盖世神功不是一日练就的。

2009年双11,阿里技术团队完全就是打酱油。四虎有惨痛记忆,有一天他接到老板指示,光棍节要搞活动,值班。“那年我们啥都没做,就坐在那看服务器。零点发现流量暴增,服务器一下就挂了。我们手忙脚乱地去重启,系统恢复后,发现店铺和商品图片又出不来了。”

到2010年,张勇才开始对技术团队有了深刻印象,不是技术有多成功,而是无奈。这桩秘闻他曾在内部讲话中分享:

当时技术Leader振飞给我报了两个备用方案,他说,逍遥子,实在没有办法,选一个:开天窗,还是变黑白。

我的想法很朴素。开天窗,一看就知道出大问题,不能买了。变黑白,还好,那时候还没有手机淘宝,大家都是PC端,PC端看黑白,我觉得还能接受。

我最后拍板,实在不行,就变黑白,真是这么过来的。

真是这么过来的!

全文完,谢谢


精选留言
  • 55
    所有的便捷之后都是无数人的努力啊!
  • 22
    猛哥啥时候上光明顶,记录双十一
    45
    作者
    已在自学java,打算去阿里技术面试,争取早日成骨干。。
  • 11
    没有马云的光明顶是不是少了点什么?
    37
    作者
    他又不懂代码,在也帮不上忙,哈哈~
  • 36
    第9部分有笔误:11月10日抬关公像,而不是11月11日,11日上午10点已经过了流量峰值了。
    24
    作者
    厉害,这都发现了,谢谢指正!
  • 14
    猛哥定为事中人!这么快,这么准,这么清,这么生动!
    34
    作者
    这次来了五六百家媒体呢,既然双十一已成为一种社会现象,还是值得写一篇的。。作为文科生,希望能讲好这个故事。。
  • 26
    看的我是酣畅淋漓,说吧猛哥,今年是不是在光明顶值班?
    29
    作者
    从此走上人生巅峰了。。
  • 28
    感觉一个农耕时代的人听到各种工业生产的专用名词,惭愧惭愧惭愧。
    12
    作者
    已经尽最大可能消化,然后说人话。。
  • 24
    很真实,有幸再光明顶奋战过三年双11,往事历历在目,印象中15年后就没出过大问题了,零点峰值已过,大家就开启买买买模式~
    8
    作者
    我擦,大佬呀,求带,一起飞~
  • 20
    台前风轻云淡,幕后惊心动魄。
  • 6
    没有支付宝账号、没上过淘宝的人,当小说看,竟然还看明白了。作者的解读能力杠杠滴!
    15
    作者
    没有支付宝➕淘宝,佩服!
  • 10
    京东在阿里的阴影下越来越强大,我看好京东。
    7
    作者
    哈哈,无敌寂寞,其实各个大小电商一起做好才是我们这些消费者的福音。。
  • 7
    第一个用鲍德里亚解读双11的文章,一看就是高手,只是……鲍德里亚是在讽刺消费文化。 按你胃,我还是觉得猛哥知道的太多了……
    10
    作者
    起初从批判政治经济学角度,消费主义将世界看为一个巨大的符号系统。这本是中性的(70年代后,鲍德里亚就抛弃了消费主义,转向传播学)。。只是到了后现代主义,如鲍曼,消费主义被认为是欲望,缺乏价值观和美德。。不过从大众媒介视角又是另一番解读,略过。。
  • 3
    京东也能够承受如何业务量,大牛人物履历可否传颂一番呢
    10
    作者
    好的,找机会写哈
  • 7
    京东在这种情况下 也不错了
    9
    作者
    是的,大强子痛定思痛后……
  • 9
    数据在终端和服务器之间流转那段好有画面感
  • 7
    猛哥,相信吗?从来不参与什么双十一,至今没有淘宝账号的我,竟然是一直屏息看完的。
    8
    作者
    我剁手买了一款跑步耳机,貌似比平时便宜差不多三百块。。
  • 8
    这双十一比春节更🈶️节日气氛
    3
    作者
    是呀
  • 4
    我们双11贡献银子的背后,是技术大咖们的辛苦奉献……
    7
    作者
    还是我们厉害,倒逼技术大咖们去进步,哈哈~
  • 7
    真的是看得我心潮澎湃,尤其是从 零点一到 那一段,写的很生动,又有江湖气息,真的很棒,这样的文章也只有我猛哥能写出来!!
  • 3
    2019年光明顶是成功扛住全球最大的流量洪峰,大洋彼岸的亚马逊却在脱虚向实,线下实体店在筹备中。不知道逍遥子何时能让曾鸣老师的"互联网×"落地,使阿里长盛不衰!
    6
    作者
    脱虚向实不一定非得自己到处开店,可以发展一批小伙伴一起耍~~
  • 6
    今天看了很多关于天猫双十一的,除了说数据造假,还是说数据造假,也没说出个所以然来(kpi,双十一消费目标,拿红包诱导消费)…… 看了您这篇文章,真的是长见识啦,原来前几次的阿里支付事故都是内部突袭,为双十一准备的。 这么缜密的行为,活该人家成功啊!
  • 4
    京东同步了11月日至11日的总成价额 11月1日?
    5
    作者
  • 4
    原文“京东11月 日-11月11日”销售额,那么到底是几日?
    5
    作者
    11/1~11/11
  • 3
    哈哈哈,你请我吃饭,我告诉你道总的传说哈
    5
    作者
    两根烤红薯?
  • 3
    淘宝店主.今年感受过两次淘宝突然无法交易..不知跟突袭有没有关系
    5
    作者
    也许,不过据了解,突袭都是午夜后,尽量不扰民~
  • 5
    好像读了一章金庸先生
  • 4
    这么大的流量换成亚马逊早就瘫痪了
    3
    作者
    这这这……
  • 2
    猛哥最近产量有点低啊…
    4
    作者
    努力赶写中
  • 4
    写的真好,再去读真《阿里云那群疯子》,就更能切身感受技术拓荒者们的纯朴与坚持。
  • 4
    看的好感动
  • 4
    刺激。牛x
  • 2
    阿里是一堆人出名,京东主要是刘强东出名。
    2
    作者
    阿里最大的优势就是文化,能输出一批又一批牛人。。大强子现在也在放权,试图培植一批强将。。
  • 2
    京东的数据那里,11月几号开始的?笔误了吧
    2
    作者
    1号
  • 京东也有两千多亿,我好奇他是的硬件技术是怎么挺过来的?
    2
    作者
    他们是分摊到十一天
  • 2
    工作性质对历史数字很明感,感谢同为文科生的猛哥写出这么好的文章。就喜欢猛哥“胡吹”一本正经的的历史,发觉背后令人深思的问题。
  • 2
    把复杂的事情,处理得简单,乃真功夫!
  • 2
    一人江湖,江湖一人。
  • 2
    这个确实牛
  • 1
    00之后有过down了一瞬间,没有这么完美。支付宝淘宝都有100%上云,这种就不用吹了
    1
    作者
    1,那是限流。2,写了:全栈上云
  • 我没有文化,用一句话形容“我操,有才”马前辈当浮一大白!
    1
    作者
    我擦,好豪迈!
  • 写的真好!连我一个门外汉都看得懂

作者: RESSRC

个人资源站

发表评论

邮箱地址不会被公开。 必填项已用*标注

此站点使用Akismet来减少垃圾评论。了解我们如何处理您的评论数据