為了緩解鐵路運輸壓力,確保旅客平安暢通出行,每年春運時節(jié),全國各地的鐵道部門都會依據(jù)客流情況,在原有的列車基礎(chǔ)上安排新增臨時列車,與此同時,火車站的售票窗口也相繼增加,以應(yīng)對客流高峰。

　　其實,這就是日常生活中所體現(xiàn)的“負載均衡”原理,根據(jù)客流的變化情況,動態(tài)調(diào)整列車數(shù)量和窗口功能,合理均衡客流,優(yōu)化出行流程。在軟件系統(tǒng)中也是一樣的道理,為了避免流量分攤不均,造成局部節(jié)點負載過大(如CPU吃緊等),所以需要一個總?cè)肟趤沓袚�類似鐵道部門的“調(diào)度”角色。

　　負載均衡就是一個統(tǒng)一網(wǎng)絡(luò)入口的組件,它接收所有網(wǎng)絡(luò)請求,然后根據(jù)預(yù)設(shè)的規(guī)則,把請求轉(zhuǎn)達給某一臺單獨服務(wù)器去處理,并且能實現(xiàn)微服務(wù)的水平拓展,處理能力和參與服務(wù)的實例數(shù)目都能動態(tài)變化,可以保障處理速度。當某個實例發(fā)生故障時會被自動摘除,對訪問者不會產(chǎn)生影響,從而實現(xiàn)高可用性。

　　不同的負載均衡技術(shù)有不同的實現(xiàn)方式及優(yōu)勢。比如,京東云與AI自主研發(fā)的分布式網(wǎng)絡(luò)負載均衡(簡稱“DNLB”),通過將用戶的無狀態(tài)業(yè)務(wù)請求按照一定策略自主分發(fā)給多臺后端服務(wù)器,從而調(diào)整資源利用情況,消除由于單臺后端服務(wù)器故障對系統(tǒng)的影響,解決大并發(fā)流量壓力,來提高用戶服務(wù)系統(tǒng)可用性、擴展系統(tǒng)服務(wù)能力。

　　正如京東云與AI產(chǎn)品研發(fā)部產(chǎn)品總監(jiān)劉俊輝所言:“DNLB是一款基于京東云SDN技術(shù)的無狀態(tài)四層負載均衡,提供軟件定義的全可用區(qū)分布式負載均衡服務(wù)。相比于主要面向7層應(yīng)用的ALB和具會話保持功能的NLB,DNLB不單獨占用計算資源,天然具有轉(zhuǎn)發(fā)性能無瓶頸、全可用區(qū)高可用、低時延、自動彈縮和長期免費的優(yōu)點,滿足客戶三高一低(高性能、高可用、高彈性和低時延)服務(wù)場景需求。”

　　SDN浸入式架構(gòu),實現(xiàn)網(wǎng)絡(luò)智能化管理

　　相比于其他負載均衡產(chǎn)品,京東云與AI的DNLB無負載均衡實體存在,不單獨占用計算資源,它的轉(zhuǎn)發(fā)性能完全依賴于京東云SDN架構(gòu),這就意味著它的轉(zhuǎn)發(fā)性能無瓶頸,能實現(xiàn)對數(shù)據(jù)中心網(wǎng)絡(luò)的智能化管理,充分利用網(wǎng)絡(luò)寬帶資源。

　　無專用節(jié)點,零成本運營

　　傳統(tǒng)的負載均衡為分擔用戶訪問的壓力,會將網(wǎng)站壓力分配給每一個節(jié)點,從而實現(xiàn)集群的橫向擴展。但當遇到擴容時,就需要不斷加入新的節(jié)點,從而造成用量隨著負載線性增加的局面,對于有狀態(tài)的服務(wù)來說,還需要啟用會話保持來保證把流量分發(fā)到固定的節(jié)點上去。京東云與AI 的DNLB是建立在SDN浸入式架構(gòu)之中,不存在專用節(jié)點 ,系統(tǒng)吞吐量可以達到最大,性能也更高,對用戶來說也沒有任何成本投入。

　　全可用區(qū)高可用,保證用戶業(yè)務(wù)連續(xù)性

　　除了無瓶頸的高轉(zhuǎn)發(fā)性能,DNLB還具備全可用區(qū)高可用的優(yōu)勢,由于DNLB實例采用的是全可用區(qū)分布式部署架構(gòu),系統(tǒng)中每個可用區(qū)都能處理一部分的負載,如果某個可用區(qū)發(fā)生故障,那么其它的可用區(qū)可以迅速接替它來運行,對用戶不會產(chǎn)生任何影響。

　　保留源IP地址,客戶端操作簡便

　　同時,在DNLB中用戶源IP地址可直接透傳到后端服務(wù)器,也就是說后端服務(wù)器上看到的網(wǎng)絡(luò)包的源地址就是用戶的真實訪問地址,用戶不需要做其它任何操作,就可以直接獲取源端真實的IP信息。

　　解耦負載均衡與會話保持功能,幫助用戶實現(xiàn)靈活部署

　　DNLB將負載均衡功能與會話保持功能解耦,使每個模塊之間的關(guān)聯(lián)減少,保持獨立性,即便一個地方出錯,也不會影響全部,從而實現(xiàn)更高性能、更靈活的部署。

　　后端服務(wù)豐富,為用戶提供更多選擇

　　由于DNLB沿襲的是ALB的虛擬服務(wù)器組設(shè)計,所以后端服務(wù)可根據(jù)流量負載情況自動調(diào)整服務(wù)器個數(shù),以實現(xiàn)合理利用資源,并支持云主機和容器作為后端服務(wù)實例,為用戶業(yè)務(wù)部署提供更多選擇。

　　成熟的應(yīng)用實踐,為用戶提供高性能服務(wù)

　　拋開功能層面來講,DNLB還是一個在應(yīng)用實踐上的“老司機”,已在京東云與AI內(nèi)部多個產(chǎn)品(例如:RDS、MongoDB、Redis、ES等)的高可用架構(gòu)中集成,其技術(shù)的成熟度可以確保用戶享受到最高性能的服務(wù),是對性能、時延和業(yè)務(wù)橫向擴展有高要求,在四層負載均衡上的極佳選擇。

　　從當前的網(wǎng)絡(luò)應(yīng)用上來看,專業(yè)的負載均衡技術(shù),能給用戶帶來更大的價值和更高的效率,尤其是對于那些部署了微服務(wù)架構(gòu)、數(shù)據(jù)中心容器的企業(yè)來說,使用DNLB能很好滿足無狀態(tài)業(yè)務(wù)的大并發(fā)流量和高可用性的分發(fā)需求。

　　比如說,像6.18、11.11這類電商大促活動時,Web 訪問量在短暫的數(shù)小時內(nèi)可能比平常瞬間增加 10 倍以上,啟用DNLB對業(yè)務(wù)系統(tǒng)進行流量分發(fā),隨著應(yīng)用的彈性擴展,DNLB的轉(zhuǎn)發(fā)能力同步擴展,保障系統(tǒng)對外的服務(wù)能力,可以滿足業(yè)務(wù)波峰時資源調(diào)控的需求。

　　而如果這時選用的是傳統(tǒng)的硬件設(shè)備搭建集群,就會遇到硬件成本高昂,運維繁瑣等問題。對于業(yè)務(wù)流量峰值高,需構(gòu)建低成本架構(gòu)的場景而言,DNLB可以有效應(yīng)對峰值流量,降低部署成本,使其擺脫硬件設(shè)備的運維工作,專注于產(chǎn)品功能的開發(fā)。

　　現(xiàn)如今,人工智能和實體經(jīng)濟的深度融合,正在推動一個新的經(jīng)濟時代的到來。京東云與AI的DNLB基于現(xiàn)有的網(wǎng)絡(luò)結(jié)構(gòu),面向高性能、大并發(fā)、低延時、無狀態(tài)的業(yè)務(wù)分發(fā)場景,提供了軟件定義的全可用區(qū)分布式負載均衡服務(wù),加強了網(wǎng)絡(luò)數(shù)據(jù)處理能力,提高了網(wǎng)絡(luò)的靈活性和可用性。尤其像銀行、電商、醫(yī)療、交通、互聯(lián)網(wǎng)這些數(shù)據(jù)量大、計算量大、通信量大的企業(yè),都成為分布式負載均衡發(fā)揮自身優(yōu)勢最主要的平臺。

　　京東云與AI作為京東集團強大商業(yè)能力的技術(shù)賦能出口,在商用以來3年多的時間里,推出及更新多達300+款產(chǎn)品與服務(wù),實現(xiàn)100%云上訂單,呈飛躍式發(fā)展。在2019年,獲得公有云和私有云雙一級資質(zhì)。在2019年6.18和11.11期間,實現(xiàn)了從容面對數(shù)百億訪問流量、每秒數(shù)百萬次的高并發(fā)請求,完全能夠勝任在高負載、高并發(fā)、高挑戰(zhàn)的網(wǎng)絡(luò)壓力下,保證業(yè)務(wù)系統(tǒng)平穩(wěn)運行,保證全天核心服務(wù)不降級、零重大事故。2019年IDC報告顯示,京東云中國公有云IaaS市場排名第九, YtY(同比)增速高達557%,行業(yè)最高,遠超74%的平均水平。

　　“我們堅持實場景驅(qū)動,堅持以客戶為中心,我們也正在從產(chǎn)品端出發(fā),把人工智能、大數(shù)據(jù)、云計算、物聯(lián)網(wǎng)等技術(shù)融合在一起,為產(chǎn)業(yè)融合、科技創(chuàng)新,提供最堅實、最前沿、最可信賴的計算基礎(chǔ)設(shè)施和服務(wù)。”劉俊輝說。