新聞資訊
了解金山云最新資訊
2021-03-10 00:00:00
“關(guān)鍵時(shí)刻來了！”
接近零點(diǎn)，北京小米科技園金山E棟9樓的工作區(qū)忽然變得無比安靜，大家目光不約而同地看向了前方的倒計(jì)時(shí)。
除夕之夜，本該闔家團(tuán)圓，但金山云的工程師們卻要面臨一場(chǎng)艱巨的戰(zhàn)役。
在2021年金山云春晚項(xiàng)目保障中心的現(xiàn)場(chǎng)，一群人屏氣凝神，濃重的“熊貓眼”緊盯著電腦屏幕上陡峭上升的曲線，準(zhǔn)備迎來今晚最后一輪流量洪峰。
“精心準(zhǔn)備了半年，最后時(shí)刻千萬不能掉鏈子！”大家雖然都面露疲憊，但依然不忘給彼此打氣。
此時(shí)，已是這支數(shù)十人組成的重保團(tuán)隊(duì)“連續(xù)作戰(zhàn)”的第6個(gè)月。
“一個(gè)前所未有的挑戰(zhàn)”
時(shí)間撥回到去年9月，金山云視頻云團(tuán)隊(duì)再次接到央視春晚的重保邀請(qǐng)。一開始，金山云副總裁鮑宇昕并未覺得意外?！拔覀兒痛和硎抢吓笥蚜?，過去三年金山云一直都在為春晚直播提供服務(wù)，表現(xiàn)有目共睹?！?/p>
但這次，央視方面提出了很多全新的需求。
原來，由于疫情影響，2021央視春晚將首次采用“云”傳播、“云”互動(dòng)形式，將現(xiàn)場(chǎng)觀眾互動(dòng)和“云觀眾”融入現(xiàn)場(chǎng)。此外，還首次引入AI+VR裸眼3D形式。而這些，無疑對(duì)廠商技術(shù)有著更高的要求。
接到需求的研發(fā)團(tuán)隊(duì)開始火速集結(jié)，商討應(yīng)對(duì)策略。有位同事的工位距離會(huì)議室比較遠(yuǎn)，當(dāng)他急忙趕到的時(shí)候，驚訝地發(fā)現(xiàn)里面擠滿了人：過去幾年參與過直播重保的骨干成員幾乎全部到場(chǎng)。
當(dāng)大家得知這次春晚的需求后，會(huì)議室陷入了短暫的安靜。由于是史上首次采用“云”傳播、“云”互動(dòng)形式，除了可預(yù)見的觀看人數(shù)，除夕還有不可預(yù)見的峰值流量會(huì)瞬間涌入，一旦沒扛住，后果不堪設(shè)想。
在沒有先例的情況下，金山云要克服的困難不少，沒有人敢當(dāng)場(chǎng)打包票。
陳海彪率先打破了沉默：“總要有人吃螃蟹，為什么不能是我們？”
陳海彪是春晚重保的老將了，金山云第一次參與春晚項(xiàng)目時(shí)，他就是成員之一。三年來，每個(gè)除夕夜，他都是在公司和重保團(tuán)隊(duì)一起度過。
對(duì)于今年春晚的需求難度，或許他心里比在場(chǎng)大多數(shù)人都要更清楚。
但是，“敢為人先”正是金山云技術(shù)團(tuán)隊(duì)的底色。
他的話音剛落，原本寂靜的會(huì)議室瞬間熱鬧起來，大家紛紛獻(xiàn)計(jì)獻(xiàn)策，并主動(dòng)報(bào)名要求加入春晚項(xiàng)目。
兵貴神速，經(jīng)過快速討論，金山云立馬成立了50多人的精英團(tuán)隊(duì)，橫跨產(chǎn)品、研發(fā)、運(yùn)營(yíng)等，重點(diǎn)突破技術(shù)壁壘。
這場(chǎng)“春晚保衛(wèi)戰(zhàn)”，就此打響第一槍。
“技術(shù)是定心丸”
兵馬未動(dòng)，糧草先行。
項(xiàng)目籌備開始后，運(yùn)維團(tuán)隊(duì)就率先對(duì)直播所需帶寬進(jìn)行了詳細(xì)全面地評(píng)估，提前為春晚協(xié)調(diào)資源，前后動(dòng)員了200余人提供支持。在極短時(shí)間內(nèi)，調(diào)動(dòng)了大量云服務(wù)器、CDN帶寬、COS存儲(chǔ)以及EBS存儲(chǔ)等資源，這種資源儲(chǔ)備能力在國內(nèi)廠商位居前列。
籌集完“糧草”，接力棒正式交到了重保團(tuán)隊(duì)手中，不過責(zé)任感和壓力也隨之而來。
此時(shí)雖然距離春晚還有幾個(gè)月時(shí)間，團(tuán)隊(duì)可以進(jìn)行充分的準(zhǔn)備。但是面對(duì)“萬無一失”的目標(biāo)，每個(gè)成員都不敢掉以輕心。
因?yàn)閹讉€(gè)月時(shí)間看起來“從容不迫”，但其實(shí)提前準(zhǔn)備的內(nèi)容并沒有外界想象中那么簡(jiǎn)單。
畢竟，即便年輕一代再怎么吐槽不看春晚，這仍然是除夕夜難以避開的，堪比“年夜飯”的傳統(tǒng)。
近5個(gè)小時(shí)直播時(shí)長(zhǎng)，全球10億+級(jí)別的流量涌入，這對(duì)架構(gòu)和技術(shù)的穩(wěn)定性考驗(yàn)極高。
金山云的直播重保一直以“穩(wěn)”著稱，為了保證直播不出差池，事先的壓力測(cè)試就顯得至關(guān)重要。
得益于金山云非常成熟的壓測(cè)工具集和流程規(guī)范，阿彬帶領(lǐng)的測(cè)試團(tuán)隊(duì)雖然擔(dān)子很重，但各項(xiàng)工作推進(jìn)有條不紊。
按照春晚方面的業(yè)務(wù)需求，測(cè)試團(tuán)隊(duì)迅速抽象出相應(yīng)的測(cè)試用例和性能指標(biāo)。為了保證直播的穩(wěn)定流暢，阿彬在內(nèi)部發(fā)起了多次壓力測(cè)試。1月15日至2月1日，每天凌晨，金山云通過模擬海量用戶訪問，從業(yè)務(wù)最低峰期到最高峰期的多輪測(cè)試來確保系統(tǒng)的能力，不斷發(fā)現(xiàn)潛在風(fēng)險(xiǎn)問題，并針對(duì)性優(yōu)化。
但是大家心里明白：對(duì)于春晚直播，這還遠(yuǎn)遠(yuǎn)不夠。
根據(jù)歷年春晚數(shù)據(jù)分析，在晚上8點(diǎn)晚會(huì)開始后的每個(gè)整點(diǎn)時(shí)刻，都會(huì)進(jìn)入流量的高峰時(shí)段，同時(shí)伴隨搶紅包等活動(dòng)會(huì)導(dǎo)致的用戶訪問高潮。這是最為考驗(yàn)穩(wěn)定性的時(shí)候，訪問量過大會(huì)引起局部過載的問題，導(dǎo)致信號(hào)無法穩(wěn)定傳輸。
在例行周會(huì)上，團(tuán)隊(duì)里的年輕人透露出自己的擔(dān)憂。但作為春晚項(xiàng)目的掌舵人，金山云CDN及視頻云產(chǎn)品中心總經(jīng)理宗劼顯得氣定神閑，亮出了兩張“技術(shù)牌”：智能調(diào)度系統(tǒng)+多流擇優(yōu)。
這是金山云團(tuán)隊(duì)自主研發(fā)的“殺手锏”，在業(yè)界也屬首創(chuàng)，能夠扛住千萬級(jí)別高并發(fā)、高QPS的數(shù)據(jù)流量訪問，確保直播信號(hào)在CDN內(nèi)部穩(wěn)定傳輸。
伴隨著春晚腳步的臨近，技術(shù)難題正在逐一被解決。
“TOP級(jí)的重點(diǎn)保障”
2021年1月1日，新年第一天。
雖然正值元旦假期，但是對(duì)于春晚重保團(tuán)隊(duì)來說，真正的挑戰(zhàn)才剛剛開始。隨著疫情形勢(shì)的再度緊張，各地號(hào)召群眾就地過年，因此對(duì)于春晚帶寬的壓力勢(shì)必也將激增。
一大早，工程師們陸陸續(xù)續(xù)來到辦公區(qū)。在最后沖刺的一個(gè)多月里，他們將把這里當(dāng)做自己的第二個(gè)家。“毫無疑問，春晚項(xiàng)目就是TOP級(jí)重點(diǎn)保障”。
金山云在視頻云領(lǐng)域多年累積的能力，成為護(hù)航春晚直播的技術(shù)基礎(chǔ)。
比如，AI+VR裸眼3D技術(shù)正在被各大直播活動(dòng)所采用，因?yàn)樗梢酝黄苽鹘y(tǒng)舞臺(tái)空間呈現(xiàn)形態(tài)，新穎炫酷、科技感更足。
但是如何提供良好的三維立體觀看體驗(yàn)，成為了行業(yè)內(nèi)必須面對(duì)的現(xiàn)實(shí)問題。
早在去年，金山云就已經(jīng)支持8K與VR的配合，360度高清視頻傳輸渲染，提供端到端一體化的完整VR點(diǎn)/直播解決方案。此外，金山云VR FOV技術(shù)將視角切換延遲控制在30-60毫秒，有效消除暈動(dòng)。同時(shí)借助AI能力，可讓數(shù)億觀眾體會(huì)身臨其境的三維立體觀看體驗(yàn)。
再比如，編解碼技術(shù)是視頻云的核心之一。
目前，金山云廣泛支持H264/265、AVS2、AV1等主流編碼方式，并提供基于此的視頻轉(zhuǎn)碼服務(wù)，同時(shí)擁有集智高清、KIE等多組產(chǎn)品。
“不積跬步無以至千里，我們?cè)谝曨l領(lǐng)域的研發(fā)動(dòng)作一直很超前?！?/strong>宗劼總結(jié)說。
2021年2月11日晚8點(diǎn)，春晚直播正式開始。
前幾波流量峰值與事先計(jì)劃的一樣，均未超出大家的預(yù)料。
負(fù)責(zé)運(yùn)維的大華如釋重負(fù)，準(zhǔn)備起身去倒杯咖啡提提神。這時(shí)他突然發(fā)現(xiàn)春晚直播的一路流出現(xiàn)回源連接數(shù)超限的隱患。
經(jīng)驗(yàn)豐富的大華立馬意識(shí)到：這是某股不可預(yù)見的流量突然涌入，可能即將出現(xiàn)網(wǎng)絡(luò)異常！但是由于客戶采用了非標(biāo)準(zhǔn)配置，修復(fù)回源連接數(shù)配置需要手動(dòng)下發(fā)配置。
大華當(dāng)機(jī)立斷向上請(qǐng)示，在得到客戶授權(quán)之后，他火速下令：“給客戶下發(fā)配置，”過了一秒他補(bǔ)充說，“嚴(yán)格按照流程！”
運(yùn)維同學(xué)們仿佛是下意識(shí)地在進(jìn)行操作：配置修改、測(cè)試、灰度、上線。在四個(gè)步驟嚴(yán)格執(zhí)行的前提下，僅耗時(shí)20分鐘就將配置變更完畢，保證了良好的直播體驗(yàn)。
看著監(jiān)測(cè)器上的數(shù)據(jù)恢復(fù)正常，大家都長(zhǎng)舒了一口氣?！笆孪妊菥毺啻危@幾乎已經(jīng)形成了肌肉記憶?！贝笕A事后回憶說。
零點(diǎn)即將到來，這是最后一波流量高峰。
幾十位工程師緊盯著大屏上的各個(gè)指數(shù)。最終，QPS和PCU峰值達(dá)到了某一個(gè)數(shù)值，但金山云穩(wěn)穩(wěn)扛住了壓力，就像之前經(jīng)歷的無數(shù)次壓測(cè)一樣，順利，且平靜。
當(dāng)春晚按時(shí)播放，當(dāng)年夜飯上桌，當(dāng)煙花綻放，沉浸在團(tuán)聚喜悅中的你或許不會(huì)知道，有這樣一群人依然在堅(jiān)守崗位，保證互聯(lián)網(wǎng)世界的有序運(yùn)作。
隨風(fēng)潛入夜,潤(rùn)物細(xì)無聲。