摘要：總共邀請(qǐng)全球觀眾參與共同瓜分了億現(xiàn)金紅包大獎(jiǎng)。春晚紅包戰(zhàn)背后暗暗較勁的正是云計(jì)算技術(shù)。此一役后，安全容災(zāi)性能成了每個(gè)春節(jié)紅包團(tuán)隊(duì)需要長(zhǎng)期考慮的問(wèn)題。

2007年，國(guó)內(nèi)情報(bào)史專(zhuān)家高金虎出版過(guò)一本《看不見(jiàn)的第二戰(zhàn)場(chǎng)》，講述無(wú)線電情報(bào)與戰(zhàn)爭(zhēng)的關(guān)系。

“看不見(jiàn)的第二戰(zhàn)場(chǎng)”，這段話拿來(lái)形容BAT春晚紅包戰(zhàn)背后的云計(jì)算技術(shù)戰(zhàn)再合適不過(guò)了。每年的春晚紅包戰(zhàn)似乎成了BAT的正面戰(zhàn)場(chǎng)，三巨頭呼風(fēng)喚雨，在短時(shí)間內(nèi)把紅包、福利全都撒出去。

大家明面上能看到是三家發(fā)了多少紅包、撒了多少現(xiàn)金，背后牽扯到的技術(shù)、資源等配置確是錯(cuò)綜復(fù)雜。

從2014年春節(jié)，騰訊就因?yàn)椤凹t包”太受歡迎遇到了技術(shù)上的“驚險(xiǎn)一刻”。2016年、2017年、2018年騰訊、阿里紛紛在云計(jì)算戰(zhàn)場(chǎng)投入重兵把分布式計(jì)算、線上智能容災(zāi)這些技術(shù)不斷普及并逐漸提高。

為支持春晚項(xiàng)目，百度再一次技術(shù)進(jìn)化，讓全自動(dòng)自如擴(kuò)容縮容，技術(shù)體系彈性容器設(shè)計(jì)，智能調(diào)度系統(tǒng)智能感知不同地區(qū)資源緊張程度成為日常。

2019年春晚直播期間，百度APP紅包互動(dòng)活動(dòng)次數(shù)達(dá)208億次。還共發(fā)出1000萬(wàn)個(gè)20．19元的紅包，100萬(wàn)個(gè)88元紅包，10萬(wàn)臺(tái)小度AI音箱，1萬(wàn)個(gè)2019元紅包以及若干手氣紅包。總共邀請(qǐng)全球觀眾參與共同瓜分了9億現(xiàn)金紅包大獎(jiǎng)。

在蘋(píng)果APP Store、小米應(yīng)用商店、華為應(yīng)用商店以及微信紅包都在春晚出現(xiàn)崩潰時(shí)刻的時(shí)候，百度APP歷經(jīng)208億次紅包互動(dòng)反而沒(méi)倒。可見(jiàn)背后百度云計(jì)算的技術(shù)進(jìn)化速度之快，技術(shù)能力之強(qiáng)其他互聯(lián)網(wǎng)公司均沒(méi)能出其右。

崩潰不崩潰？這是個(gè)問(wèn)題。BAT春晚紅包戰(zhàn)背后暗暗較勁的正是云計(jì)算技術(shù)。它如正面戰(zhàn)場(chǎng)背后的情報(bào)戰(zhàn)一樣，看不見(jiàn)摸不著，但卻往往起到了決定作用。

一

春晚“驚險(xiǎn)一刻”，家家都要應(yīng)對(duì)

2017年年初，我當(dāng)時(shí)在一家媒體工作時(shí)，曾經(jīng)和騰訊FIT（騰訊支付基礎(chǔ)平臺(tái)與金融應(yīng)用線）春晚紅包技術(shù)負(fù)責(zé)人聊過(guò)紅包戰(zhàn)背后的技術(shù)問(wèn)題。2014年春節(jié)前十幾天，騰訊春節(jié)紅包團(tuán)隊(duì)為活躍新年氣氛，想到要在微信里加入搶紅包功能。一個(gè)大約10 人，隸屬于騰訊FIT技術(shù)部門(mén)的核心團(tuán)隊(duì)主導(dǎo)了開(kāi)發(fā)過(guò)程。

春節(jié)紅包正式上線前，團(tuán)隊(duì)內(nèi)測(cè)時(shí)便發(fā)現(xiàn)，這個(gè)“小功能”使用人數(shù)遠(yuǎn)遠(yuǎn)超過(guò)預(yù)期：從廣州等一線城市開(kāi)始，發(fā)紅包的習(xí)慣逐漸擴(kuò)展到二、三、四線城市，直至全國(guó)。數(shù)據(jù)增長(zhǎng)得“驚心動(dòng)魄”，春節(jié)紅包團(tuán)隊(duì)每天都要忙著給紅包系統(tǒng)擴(kuò)容。

春節(jié)紅包團(tuán)隊(duì)當(dāng)時(shí)隱隱覺(jué)得，除夕夜可能會(huì)出問(wèn)題，“用戶增長(zhǎng)量太大了，這個(gè)功能一開(kāi)始架構(gòu)就是按照小系統(tǒng)來(lái)設(shè)計(jì)的，但臨時(shí)改動(dòng)已經(jīng)來(lái)不及了?！?/p>

墨菲定律中有這樣一條：如果你擔(dān)心某種情況發(fā)生，那么它就更有可能發(fā)生。

1月28日，除夕前倒數(shù)第二天那個(gè)下午，“新年紅包”的圖標(biāo)第一次出現(xiàn)在“我的銀行卡”界面中，微信紅包潮隨即引爆全國(guó)。

驚險(xiǎn)瞬間在除夕夜一觸即發(fā)，春節(jié)紅包團(tuán)隊(duì)迅速啟動(dòng)了過(guò)載保護(hù)。過(guò)載用戶想發(fā)紅包時(shí)，系統(tǒng)會(huì)提示“當(dāng)前系統(tǒng)繁忙”。除夕夜還在加班的程序員們就像是交警一樣，在一條堵死的十字路口上不斷控制流量。

幸好，當(dāng)時(shí)騰訊FIT技術(shù)團(tuán)隊(duì)臨時(shí)調(diào)來(lái)了10倍于原設(shè)計(jì)數(shù)量的服務(wù)器，最終有驚無(wú)險(xiǎn)地扛住了考驗(yàn)。

此一役后，安全、容災(zāi)、性能成了每個(gè)春節(jié)紅包團(tuán)隊(duì)需要長(zhǎng)期考慮的問(wèn)題。在2016年以后，騰訊FIT技術(shù)逐漸為春節(jié)紅包構(gòu)建了一套“多點(diǎn)多活、多地多中心”的分布式交易系統(tǒng)。

后來(lái)的微信紅包、支付寶紅包背后的云計(jì)算團(tuán)隊(duì)每年都需要“一把屎一把尿”，不斷改進(jìn)春晚紅包的技術(shù)框架，除夕這天加班加點(diǎn)避免紅包宕機(jī)。

創(chuàng)業(yè)邦在2017年就曾以《支付寶17年新春紅包技術(shù)體系剖析》一文介紹螞蟻金服技術(shù)團(tuán)隊(duì)在春晚前的技術(shù)準(zhǔn)備，其中這樣一段非常值得注意：

螞蟻金服在終端上采用了限流無(wú)感知、資源預(yù)下載、用戶操作數(shù)據(jù)緩存、開(kāi)獎(jiǎng)時(shí)間離散、數(shù)據(jù)項(xiàng)與開(kāi)關(guān)動(dòng)態(tài)配置等穩(wěn)定性操作；在服務(wù)端，進(jìn)行了全鏈路梳理、全鏈路壓測(cè)、限流保護(hù)、應(yīng)急熔斷機(jī)制等。

百度今年也不例外。2019年1月4日收到百度春晚要發(fā)紅包的消息后，百度技術(shù)團(tuán)隊(duì)首先要想的問(wèn)題是，如何搭建春晚紅包的技術(shù)框架，原因很復(fù)雜。