2017年4月12-13日，2017亞太CDN峰會(huì)在北京隆重召開(kāi)，在13日上午的視頻云論壇上，百度系統(tǒng)副總監(jiān)劉寧作了題為《云智時(shí)代的CDN平臺(tái)》主題報(bào)告。
百度系統(tǒng)副總監(jiān)劉寧
用戶需求趨向?qū)DN提出新的需求
用戶需求趨向的改變帶給了整個(gè)CDN行業(yè)發(fā)展的動(dòng)力，體現(xiàn)在通信社交、消費(fèi)需求、個(gè)性化以及kill time等已經(jīng)變成了用戶的需求，同時(shí)還包括泛信息、泛娛樂(lè)。這些用戶需求的典型特點(diǎn)是富媒體化，對(duì)于視頻點(diǎn)播、視頻直播包括短視頻行業(yè)對(duì)這些方面有了更多的需求，也給CDN行業(yè)提出了很多的要求。
越來(lái)越多的用戶無(wú)論是內(nèi)部用戶還是外部用戶，在用戶體驗(yàn)方面都提出了非常高的要求，不光是可用性、質(zhì)量還有更低的成本、技術(shù)上更快更好的研發(fā)和對(duì)接，用戶還對(duì)云廠商人工智能、大數(shù)據(jù)的能力提出了相應(yīng)的要求。
ABC+CDN：云+智+數(shù)+CDN合力為企業(yè)發(fā)展賦能
百度云的CDN平臺(tái)實(shí)際上在推出產(chǎn)品之前也在百度內(nèi)部打磨了七年多的時(shí)間，百度云內(nèi)部從各個(gè)層面上有非常多的經(jīng)驗(yàn)和技術(shù)積累，比如說(shuō)網(wǎng)絡(luò)層，在多級(jí)CDN的覆蓋、多線的源站、BGP的源站及非常多的小運(yùn)營(yíng)商peer等等;在軟件層面比如流量的調(diào)度、GSLB、4 7層負(fù)載均衡以及熱點(diǎn)的負(fù)載均衡、緩存系統(tǒng)的優(yōu)化、AI、黃反識(shí)別、視頻標(biāo)簽等都有非常豐富的經(jīng)驗(yàn)。通過(guò)監(jiān)控平臺(tái)可以實(shí)時(shí)發(fā)現(xiàn)百度云上出現(xiàn)了什么問(wèn)題，及時(shí)做調(diào)度。百度云的配置管理方便用戶快速做配置變更，在基礎(chǔ)服務(wù)層面包括文件上傳、內(nèi)容刷新、推流、轉(zhuǎn)碼以及數(shù)據(jù)的分析;同時(shí)在解決方案上，百度云給用戶提供了相對(duì)比較全面的解決方案，比如存儲(chǔ)的分發(fā)、大文件的分發(fā)、小文件分發(fā)、視頻的解決方案等等。
百度的CDN平臺(tái)以及百度云通過(guò)借助百度的AI和BIG DATA可以給用戶提供更高的價(jià)值。
精細(xì)打磨CDN產(chǎn)品能力，提供高品質(zhì)CDN服務(wù)
高品質(zhì)的CDN平臺(tái)通常要滿足三點(diǎn)要素：首先是可用性，再者要求更高的性能，并且要求更好的用戶體驗(yàn)。百度的CDN平臺(tái)在內(nèi)部一直承載著搜索業(yè)務(wù)、圖片業(yè)務(wù)以及網(wǎng)盤(pán)類(lèi)型的業(yè)務(wù)，即能滿足搜索類(lèi)型業(yè)務(wù)極其嚴(yán)格的可以性和質(zhì)量要求，也能滿足網(wǎng)盤(pán)對(duì)存儲(chǔ)容量和承載能力的嚴(yán)格要求。
在穩(wěn)定性方面，百度在做CDN節(jié)點(diǎn)選擇的時(shí)候會(huì)做非常嚴(yán)格的節(jié)點(diǎn)準(zhǔn)入。實(shí)際上在運(yùn)營(yíng)商不同層級(jí)的節(jié)點(diǎn)上CDN質(zhì)量差別非常大，而且即便是一個(gè)層級(jí)上的節(jié)點(diǎn)，還是有很大差別。百度還建立了全國(guó)質(zhì)量感知網(wǎng)絡(luò)，通過(guò)建設(shè)全國(guó)監(jiān)控網(wǎng)，通過(guò)不同的維度監(jiān)控業(yè)務(wù)問(wèn)題，比如服務(wù)端、客戶端、第三方監(jiān)測(cè)等等。每天通過(guò)千億級(jí)PV在服務(wù)器后端發(fā)現(xiàn)問(wèn)題，也可以通過(guò)百度做業(yè)務(wù)打點(diǎn)進(jìn)行錯(cuò)誤檢測(cè)。通過(guò)這樣的方式可以比較實(shí)時(shí)發(fā)現(xiàn)問(wèn)題在哪兒然后做及時(shí)的調(diào)度切換。
CDN是一個(gè)重度依賴(lài)硬盤(pán)和SSD的服務(wù)，對(duì)硬盤(pán)健康性的把握直接影響CDN的服務(wù)質(zhì)量和可用性。一個(gè)CDN節(jié)點(diǎn)，當(dāng)服務(wù)器越少的時(shí)候，一塊硬盤(pán)出現(xiàn)質(zhì)量問(wèn)題如果沒(méi)有及時(shí)發(fā)現(xiàn)，所導(dǎo)致影響就越大，很可能造成一個(gè)節(jié)點(diǎn)百分之零點(diǎn)幾的可用性影響，這對(duì)一個(gè)超過(guò)4個(gè)9可用性的cdn平臺(tái)是不可接受的。百度云劉寧總監(jiān)介紹道：百度采用監(jiān)控故障扇區(qū)、磁頭馬達(dá)等硬件錯(cuò)誤、設(shè)備報(bào)錯(cuò)、設(shè)備文件不可訪問(wèn)、進(jìn)程D狀態(tài)、盤(pán)符缺失、SmartFail等數(shù)據(jù)，運(yùn)用GBDT(Gradient Boosting Decision Tree)、SVM等算法 + 神經(jīng)網(wǎng)絡(luò)構(gòu)建故障預(yù)測(cè)模型，不僅可以做到故障不漏發(fā)現(xiàn)，還可提前48小時(shí)預(yù)測(cè)故障，準(zhǔn)確率>90%，一旦預(yù)測(cè)到磁盤(pán)故障將要發(fā)生，會(huì)提前遷移盤(pán)上的熱點(diǎn)數(shù)據(jù)，同時(shí)提前剔除故障磁盤(pán)，并自動(dòng)報(bào)修。
在性能方面，一方面從網(wǎng)絡(luò)以及節(jié)點(diǎn)的布局設(shè)計(jì)上考慮，在運(yùn)營(yíng)商骨干節(jié)點(diǎn)上建立了大量的超級(jí)節(jié)點(diǎn)，單個(gè)節(jié)點(diǎn)存儲(chǔ)超級(jí)結(jié)點(diǎn)可以達(dá)到3個(gè)P的存儲(chǔ)，有助于緩存持久化。同時(shí)單個(gè)節(jié)點(diǎn)帶寬達(dá)到160G或者更高的級(jí)別的時(shí)候就可以應(yīng)對(duì)云時(shí)代業(yè)務(wù)中很多突發(fā)、攻擊，應(yīng)對(duì)較為復(fù)雜的情況。這樣的結(jié)構(gòu)超級(jí)節(jié)點(diǎn)加上更廣泛覆蓋的邊緣節(jié)點(diǎn)，可以提升命中率。另外還在自研的負(fù)載均衡、DNS、自研交換機(jī)上做了大量的優(yōu)化工作，百度在負(fù)載均衡上基于DBDK開(kāi)發(fā)了40G單機(jī)能力的負(fù)載均衡，它可以幫助百度很容易設(shè)計(jì)建設(shè)一些超級(jí)節(jié)點(diǎn)。
在速度優(yōu)化方面，百度云做了非常多調(diào)優(yōu)。一方面是通過(guò)節(jié)點(diǎn)的覆蓋，通過(guò)精準(zhǔn)的CDN角度302調(diào)度，同時(shí)在算法上做了大量工作。尤其在協(xié)議棧的優(yōu)化上，在去年一年就線上迭代了近100個(gè)版本，使得協(xié)議棧的擁塞算法的性能大幅超過(guò)標(biāo)準(zhǔn)cubic以及google BBR在internet上的表現(xiàn)。
百度云的獨(dú)特優(yōu)勢(shì)在于以下幾點(diǎn)：1、質(zhì)量感知：百度用戶基數(shù)大、使用密集、質(zhì)量數(shù)據(jù)實(shí)時(shí)、細(xì)膩，基于訪問(wèn)質(zhì)量的自動(dòng)實(shí)時(shí)調(diào)度。2、大數(shù)據(jù)：服務(wù)器故障大數(shù)據(jù)，硬盤(pán)故障預(yù)測(cè)并自動(dòng)踢出，杜絕帶病運(yùn)行。3、骨干節(jié)點(diǎn)：運(yùn)營(yíng)商骨干節(jié)點(diǎn)數(shù)100+，邊緣節(jié)點(diǎn)200+，三級(jí)節(jié)點(diǎn)緩存，4、BGP接入：BGP接入超過(guò)30家運(yùn)營(yíng)商。5、節(jié)點(diǎn)測(cè)試：嚴(yán)格的節(jié)點(diǎn)準(zhǔn)入測(cè)試。
百度云在做各方面技術(shù)的打磨、產(chǎn)品的打磨的時(shí)候，更多是希望給用戶提供更好的產(chǎn)品和解決方案以及更好的性能。
百度云的解決方案
1、安全解決方案
演講中，劉寧跟大家分享了幾個(gè)百度的解決方案。整個(gè)中國(guó)的互聯(lián)網(wǎng)劫持非常嚴(yán)重，通常業(yè)務(wù)可以達(dá)到1%以上的劫持率，所以搜索業(yè)務(wù)前幾年就開(kāi)始做全站的切換，百度在很早就開(kāi)始做全站的HTTPS的切換。在這個(gè)過(guò)程中，一方面SRE團(tuán)隊(duì)做了SSL接入層面優(yōu)化，另一方面百度也開(kāi)發(fā)了SSL offload異步集群，通過(guò)硬件加速的集群降低性能開(kāi)銷(xiāo)，最終達(dá)到了理想的效果。百度能夠提供證書(shū)托管服務(wù)業(yè)、Keyless的https服務(wù)，同時(shí)也提供客戶httpDNS服務(wù)解決在DNS請(qǐng)求方面的劫持。
2、存儲(chǔ)分發(fā)方案
百度在提供CDN分發(fā)的同時(shí)也提供了很完整的存儲(chǔ)分發(fā)解決方案。百度的存儲(chǔ)分發(fā)解決方案是基于網(wǎng)盤(pán)近些年產(chǎn)品的積累和技術(shù)的打磨，百度網(wǎng)盤(pán)實(shí)際上是為解決過(guò)億用戶千PB的存儲(chǔ)問(wèn)題。百度云的存儲(chǔ)方案給用戶提供數(shù)據(jù)的上傳、備份、存儲(chǔ)和處理的工作，用戶可以簡(jiǎn)單的開(kāi)啟其數(shù)據(jù)分發(fā)同時(shí)進(jìn)行智能數(shù)據(jù)分級(jí)，大規(guī)模降低用戶存儲(chǔ)的成本。
3、P2P加速解決方案
P2P加速解決方案能夠節(jié)約30%帶寬費(fèi)用，降低企業(yè)成本。體驗(yàn)：用戶體驗(yàn)好，卡頓比小于5%，首畫(huà)面時(shí)間小于1s;SDK：支持多平臺(tái)的SDK，資源占用少，豐富的控制接口;分享率：全天分享率大于35%，熱門(mén)文件的分享率達(dá)到80%以上;成本：降低30%以上。
4、視頻解決方案
百度的視頻云解決方案既提供基礎(chǔ)視頻云服務(wù)，也提供基于百度深度學(xué)習(xí)算法、百度大腦AI的能力，同時(shí)提供百度大數(shù)據(jù)支撐也幫助客戶建設(shè)視頻索引系統(tǒng)、視頻搜索系統(tǒng)。百度的視頻基礎(chǔ)云是基于百度自研的視頻點(diǎn)播VOD及視頻直播系統(tǒng)研發(fā)的，百度在視頻點(diǎn)播、直播上做了大量?jī)?yōu)化工作，從推流、拖流到源站，整個(gè)鏈路上沒(méi)有采用開(kāi)源的方案，而是采取百度自己的私有協(xié)議做了大量的優(yōu)化工作。百度視頻直播云在1-3毫秒延時(shí)的情況下可以提供3%以內(nèi)的卡頓率。百度的視頻點(diǎn)播云一方面為客戶提供視頻播放、視頻分發(fā)網(wǎng)絡(luò)、轉(zhuǎn)碼以及存儲(chǔ)，另一方面直播平臺(tái)也給用戶提供單向的LSS直播以及雙向的互動(dòng)直播，還可以做直播錄制。
百度的視頻基礎(chǔ)云背靠百度AI和大數(shù)據(jù)，致力于給用戶提供精準(zhǔn)的內(nèi)容理解。百度在內(nèi)容審核方面可以給用戶提供非常高準(zhǔn)召率的色恐的審核，包括人物的審核，政治敏感度人物的審核，版權(quán)審核、播控審核、智能縮略圖、字幕的生成等等。，利用視頻AI提供的視頻結(jié)構(gòu)化標(biāo)簽，結(jié)合百度視頻大數(shù)據(jù)的能力可以幫助用戶快速構(gòu)建起視頻推薦系統(tǒng)以及視頻內(nèi)容的索引系統(tǒng)。如果用戶沒(méi)有很好的用戶畫(huà)像，百度大數(shù)據(jù)也會(huì)為其提供用戶畫(huà)像的冷啟動(dòng)，從而快速構(gòu)建他的視頻推薦系統(tǒng)，建設(shè)用戶視頻模型及視頻特征模型。
關(guān)于在內(nèi)容生產(chǎn)方面百度可以幫用戶做什么，劉寧答道一方面是用戶的生產(chǎn)輔助，比如長(zhǎng)精彩片段的提取、字幕的輔助生成，百度視頻結(jié)構(gòu)化標(biāo)簽的準(zhǔn)召率非常高，通常的結(jié)構(gòu)化標(biāo)注范圍比較少、標(biāo)簽的維度也比較少，但是用百度的AI則可以做到非常豐富的標(biāo)簽。
在視頻流量方面，百度竭力幫助用戶解決兩個(gè)關(guān)鍵的問(wèn)題：一個(gè)人找視頻的場(chǎng)景，另一個(gè)是視頻找人的場(chǎng)景。人找視頻場(chǎng)景通常是廣電側(cè)的場(chǎng)景，可以結(jié)合視頻的輸出和百度搜索幫助用戶快速構(gòu)建起站內(nèi)搜索能力；視頻的推薦主要側(cè)重于UGC的場(chǎng)景，在視頻內(nèi)容模型和用戶行為上幫助用戶快速構(gòu)建起站內(nèi)更為精準(zhǔn)的推薦。
用戶還可以結(jié)合百度的百家號(hào)和百度視頻提供更好的內(nèi)容的曝光。在營(yíng)銷(xiāo)方面可以幫助UP主以及內(nèi)容生產(chǎn)方快速建立起來(lái)粉絲和輿情管理、用戶畫(huà)像。比如一個(gè)UP主肯定非常想關(guān)注到他所有的粉絲是什么樣的年齡群體、年齡段，什么樣的職業(yè)背景、什么樣的家庭背景，更喜歡什么方面的內(nèi)容，這樣才有助于指導(dǎo)UP主生產(chǎn)內(nèi)容。在視頻流量變現(xiàn)方面，一方面百度云可以幫助用戶快速搭建廣告平臺(tái)，另一方面也可以通過(guò)視頻DSP、聯(lián)盟視頻廣告快速幫助用戶實(shí)現(xiàn)變現(xiàn)。
最后劉寧建議大家更多關(guān)注ai.baidu.com、cloud.baidu.com，網(wǎng)站發(fā)布有很多關(guān)于智能視頻和百度云CDN產(chǎn)品動(dòng)態(tài)的信息。
微信掃一掃
