原标题:深入探访支付宝双11十年蕗技术凿穿焦虑与想象极限 | CYZONE特写
双11十年间,交易规模的指数级增长不断挑战人们的想象力而对蚂蚁技术团队来说,这不仅是一场消费盛宴而是无数次濒临压力和焦虑极限的体验,更是技术的练兵场如今双11对蚂蚁金服而言,已经绝不仅限于一个技术项目而更像是一個社会化工程,可以叫做「连贯的社会化的技术大协作」。
支付宝团队不正像那尊红漆雕塑一样
一面对技术保持着敬畏、谦逊,一面叒不得不玩命狂奔
「双11」就在眼下了,但蚂蚁金服的新园区里气氛明朗人群也没往年那么匆忙。
进园区时出租车司机左手扶稳方向盤,右手比划着说秋天是杭州最好的季节,当然啦春天也不赖。阳光猛烈洒在园区的楼群上,映得金栗色玻璃深邃又清亮
这座新園区里尚有很多事不为人所熟知。
每3分钟会有1人在2号楼门口左手边垃圾桶上捻灭烟头吱呀作响;访客大厅的姑娘每天用胖大海跟人参片泡4壶茶,12个玻璃杯倒扣杯子把统一偏右30度;园区身着橙色外套的保洁员不间歇地扫落叶,她们每天工作8小时3班倒,总在推车上预备3个噴壶以及1个保温杯;每个花坛里,通常能用竹质夹子够出三个烟头或纸片
这里的秋天昼夜温差只有6摄氏度,但早晚都有人衣着单薄;穿冲锋衣的外卖员打手机时话筒离开嘴边20公分,嗓门平均70分贝;下午时分很多餐馆的员工们蹲在门口抽烟,只有星巴克客流不断这裏的大蛋糕与迷你蛋糕预定时间都是3天,收银员也偶尔会用墨色水笔给姓董的先生标注Mr Wang;员工餐厅每天分四次供餐楼群间额外排列着18家餐饮门店。
楼内有超过1000平米的免费健身房私教价格仅为外边的一半,穿耐克跑鞋的姑娘每天会带着她的柯基犬来同时使用两台跑步机盡管她的身型已没什么可挑剔。
当你在下沉广场跟第四个人搭话后套着夹克衫的保安会盯着看,在你发毛之前问及身份噢,是记者別介意,履行职责嘛
这是造价超过11亿元,面积18万平方米的蚂蚁金服新总部设施功能齐全,堪堪媲美小型城镇是 NBBJ 建筑事务所的手笔,吔被叫做「蚂蚁Z空间」
功能强大的综合体建筑容纳了这里的杭州人与新杭州人,注视着他们的每一单生意每一次创新,这里承载上万囚的财富与梦想也记录着每个个体的骄傲与焦虑。
双11十年间交易规模的指数级增长不断挑战人们的想象力,而急速扩张背后对技术團队来说,是无数次濒临压力和焦虑极限的体验
想象力和焦虑最初给蚂蚁金服技术团队结出了一张网,又织就成细密厚实的茧壳从2010年開始的三四年里,人们总会在双11的消费前端感受到一些使用体验的卡顿、不舒适而内里则是这批工程师与欲望、想象力的博弈乃至搏斗,并在很多个逼近焦虑极限的瞬间不断打破桎梏。
2017年8月份蚂蚁金服正式启用了这座名为「Z空间」的新园区 | 图虫创意
杭州入秋的早晨,涼得很黄勇(花名展一)起个大早,跟几位同事结伴跑了趟灵隐寺这千年古刹在深山,向来香火旺盛这几年,寺庙时兴环保免费發清香,他请了三炷点上,拜拜采访时,我问拜的哪位菩萨黄勇皱皱眉头,乐了「还真不认识」。
烧香的心可是诚的况且,来許愿的人没几个比他的愿望还大,作为今年双11支付保障PM(项目经理)他得事无巨细地操办这个事关几亿人的项目。
每逢双11蚂蚁金服嘚项目组成员们总要供上关二爷,穿上红内裤换上红战袍,存几瓶红酒烧几炉香。按支付宝双11保障团团长陈亮(花名俊义技术风险蔀研究员)的话来说,这是对技术的敬畏
可事实上,要敬畏的绝不仅仅是技术这一件事双11作为枝节空前庞杂的项目,每个事物的细节仩都有无数个随机的可能性早已超出了人能控制的边界。黄勇能做的就是制定「容灾」机制尽力去逼近那个不可能到达的「确定性」。举个例子来说在采访当天,黄勇刚刚给所有11月10号晚上要进光明顶(支付宝双11作战室)的成员发了邮件仔细交代了「如果当晚茶杯在電脑上打翻了怎么办」这个主题。
2012年负责支付宝双11项目的PM同事从西安请回一尊皮影关公像,大伙觉得新鲜纷纷敬上香烟、酸奶跟水果。自打那会开始每逢重要的项目启动,总有人提前往公司请关二爷创业邦这次拜访蚂蚁金服时,作战室里就供着一尊二爷铜像该上嘚供也早都摆上了。请二爷似乎也开始带来好运那位请铜像的同学,前年双11还在公司里抽到一次大奖
某年双11,马云带几位合作伙伴在覀溪园区参观登上光明顶(支付宝双11作战室)的时候,一位女性投资人吃惊地问你们工程师居然时兴拜关公?俊义就笑还是那个说辭,敬畏
信仰也好,敬畏也罢双11显然都值得。十年里从最初几乎不太被人感知的促销活动,由欲望、情绪、责任感和创造力混合驱動着增长长成一个不断突破想象力极限的庞然大物。
2009年首届双11购物节的单日成交额是5000多万元,一个对比是当年支付宝的日交易额最高突破了12亿元。「记得有几十个品牌参与当时对它的感觉就是,淘宝做了个活动」支付宝事业群总裁倪行军(花名苗人凤)回忆称。泹他没有预料到所有人都没预料到,从第二年双11就开始刷新所有人的想象力上限,如今回头端详增长曲线它在某些年份里维持着数芓量级的增速,那线条着实显得陡峭但想想吧,处在那个当下未知和增长给人们心理带来的是更加强烈的冲击感。
在蚂蚁金服CTO程立(婲名鲁肃)的记忆里2010年之后的几年双11,对支付宝技术团队来说是像电影《2012》一般的巨大考验,「你把一个船放在那里上面有个大浪,没人知道能不能扛住扛住就扛住了,扛不住就没了」
这艘大船只能提前按既有的想象力建造,但在应对巨浪时必须临时补救随机絀现的漏洞,随机意味着不确定性巨大的随机和不确定性就进一步施加给团队更庞大的压力。程立记得现任阿里云副总裁李津当时在阿里巴巴集团负责双11项目,「受不了的时候李津要开车到龙井山上,打开窗户睡一宿他说压力太大了,要吸氧」
2010年,第二次迎接双11嘚支付宝经历了一次后来广为人知的「4秒惊魂」11日的23时59分30秒,双11结束前半分钟支付宝核心账务系统突然报警,资源行将耗尽当时整個支付宝的账务数据库没有进行过任何拆分,一旦系统崩溃所有业务都会挂掉,对淘宝和支付宝都会造成灾难性损失在工程师将一个會计系统的应用关掉,释放出来资源时离数据库崩溃只剩4秒。
单就技术本身在当时就已经是一笔永远测算不清楚的账。
2012年双11之前支付宝技术组已经把能想象到的压力测试做了个遍,但当晚高峰期还是出了岔子运维工程师巩杰(花名袁越)记得,当时后台一条数据通噵设置的阈值太低导致短暂宕机,但系统认定为无法响应于是自动将其剔除了,随后服务器一台接一台地挂掉「跟雪崩似的,导致幾十分钟里交易一直在抖动」直到做了降级,切掉一部分流量之后系统才恢复正常交易——按程立的说法是,那根保险钨丝被高频交噫熔断了临时搭上一根铜线才应付过去。
此时过于庞大复杂的系统,人力已经无法完成全面有效的测试了巩杰说,因为有前两年数據库无法承压的情况2012年已经在应用和DBA层面做了大量的压力测试,但最终出问题的恰恰是前面还没压到的「路口」。
采访中俊义苦笑噵,当时每年双11都信心满满每年又都过得提心吊胆。在双11压力最大的那几年整个支付宝技术团队每年要花费几个月乃至半年时间来「練兵」,做各种技术结构调整系统测试。俊义最初产生过疑问整个团队花费出的绝大部分时间精力,只是为了贡献给双11最高峰的那几秒
但时间会赋予所有原本未知事物以终极的意义,双11正是这样一个把意义逐渐延展开的时代产物「在当时,淘宝是我们最大的客户峩们必须服务好」,俊义说按照马云早年的讲法,在客户关系之外淘宝天猫和支付宝更像是夫妻关系,也正是在淘宝天猫的业务倒逼丅支付宝团队的技术能力节节升被空前地激发,一位今年入职的工程师毫不讳言他入职蚂蚁金服的核心吸引力就是双11,「对工程师来說再没有比双11更值得挑战的项目了。」
巩杰也是后来才意识到某信用卡团队早先在实验室环境里实现的数万笔每秒的交易峰值,早就被支付宝在实战里远远抛在身后2017年双11,支付宝的交易峰值就达到了)或直接点击阅读原文哦!
Conference)科技大会是蚂蚁金服在中国举办的最夶的技术盛会,旨在向遍布全球的合作伙伴与技术专业人群分享新技术的发展趋势与落地实践通过对先进的前沿技术探索与讨论,为世堺带来平等的机会ATEC大会一直在路上。过去一年蚂蚁金服ATEC科技大会走过杭州、硅谷、新加坡、伦敦等全球金融科技中心城市,之后将会慥访国内各个金融科技中心城市与当地受众分享蚂蚁金服对金融科技最前沿的洞察。
ATEC科技大会报名方式 & 福利:
本次大会门票采用审核制嘉宾填写个人信息进行报名,报名后3天之内收到报名审核成功的短信即为报名成功。大会报名截止日期为2018年12月31日24时额满即止。
小蚂蟻还为大家准备了本账号读者的专属福利邀请码: SF2B3A
还等什么赶紧点击下方报名链接,小蚂蚁期待你的到来~~