EMQ助力阿里云洛神云網(wǎng)絡(luò)構(gòu)建新一代“億級(jí)并發(fā)、百萬級(jí)吞吐”NLB網(wǎng)絡(luò)型負(fù)載均衡系統(tǒng)

萬物智聯(lián)的數(shù)字化時(shí)代,我們正走在從“數(shù)據(jù)量變”到“連接質(zhì)變”的道路上。在日益豐富的物聯(lián)網(wǎng)應(yīng)用場景中,實(shí)現(xiàn)海量設(shè)備與云端之間雙向通信連接,分析并從中獲得實(shí)時(shí)洞察成了打造成功物聯(lián)網(wǎng)解決方案的核心推動(dòng)因素。EMQ 映云科技(以下簡稱“EMQ”)作為全球領(lǐng)先的開源物聯(lián)網(wǎng)基礎(chǔ)設(shè)施軟件供應(yīng)商,為云上用戶打造了高并發(fā)、高性能、高可靠、開箱即用的一站式物聯(lián)網(wǎng)數(shù)據(jù)解決方案,通過海量云邊端數(shù)據(jù)的實(shí)時(shí)“連接、移動(dòng)、處理與分析”,助力企業(yè)及合作伙伴構(gòu)建云邊一體化的物聯(lián)網(wǎng)基礎(chǔ)設(shè)施能力底座。

繼 EMQ 核心產(chǎn)品大規(guī)模分布式物聯(lián)網(wǎng) MQTT 消息服務(wù)器 EMQX 成功上線阿里云計(jì)算巢、與阿里云原生多模數(shù)據(jù)庫 Lindorm 構(gòu)建物聯(lián)網(wǎng)全鏈數(shù)據(jù)聯(lián)合解決方案后,EMQX 再度與阿里云旗下智能云網(wǎng)絡(luò)洛神云展開合作,助力洛神云網(wǎng)絡(luò)構(gòu)建新一代支持“億級(jí)并發(fā)、百萬級(jí)吞吐”的 NLB 網(wǎng)絡(luò)型負(fù)載均衡系統(tǒng)。

“1 億并發(fā)、100 Gbps 吞吐”核心性能測試

EMQ 為阿里云飛天洛神云網(wǎng)絡(luò)基于 NLB 網(wǎng)絡(luò)型負(fù)載均衡提供大規(guī)模分布式物聯(lián)網(wǎng) MQTT 消息服務(wù)器,助力驗(yàn)證了 NLB 單實(shí)例可支持超 1 億并發(fā)連接和超 100 Gbps 吞吐的核心性能指標(biāo),這意味著只需要購買一個(gè) NLB 實(shí)例,EMQX 就可以一直擴(kuò)展到滿足億級(jí)設(shè)備的并發(fā)管理,支撐業(yè)務(wù)的平滑擴(kuò)張能力,同時(shí)也為洛神云網(wǎng)絡(luò) NLB 支持車聯(lián)網(wǎng)、工業(yè)物聯(lián)網(wǎng)等高規(guī)格應(yīng)用場景提供了可靠的技術(shù)驗(yàn)證。

該項(xiàng)目已經(jīng)完成了核心性能指標(biāo)的測試,測試環(huán)境使用阿里云云上資源,地域在德國法蘭克福線上正式環(huán)境,測試拓?fù)淙缦聢D所示:

·EMQX 客戶端集群由 35 臺(tái) g5ne.8xlarge ECS 組成,均部署在 eu-central-1b 可用區(qū),安裝 MQTT 客戶端壓測程序,用于模擬客戶端業(yè)務(wù)。

·EMQX 服務(wù)端集群由 36 臺(tái) g5ne.8xlarge ECS 組成,均部署在 eu-central-1b 可用區(qū),安裝 MQTT 服務(wù)端業(yè)務(wù)程序,為線上真實(shí)業(yè)務(wù)。

·創(chuàng)建雙可用區(qū)私網(wǎng) NLB 實(shí)例,該 NLB 產(chǎn)品實(shí)例分布在 eu-central-1a 和 eu-central-1b 兩個(gè)可用區(qū),用于可用區(qū)級(jí)別的容災(zāi)和流量負(fù)載均衡,實(shí)例開啟跨可用區(qū)轉(zhuǎn)發(fā)。

·EMQX 控制集群由 3 臺(tái) hfc6.16xlarge ECS 組成,均部署在 eu-central-1b 可用區(qū),用于集群變配控制和流量監(jiān)控,不承載轉(zhuǎn)發(fā)業(yè)務(wù)。

1 億并發(fā)壓測,長鏈路不中斷

EMQX 客戶端以 3.5 萬 CPS 速率開始建連,保持 MQTT 長鏈接不中斷,50 分鐘后在阿里云 NLB 控制臺(tái)看實(shí)例監(jiān)控統(tǒng)計(jì),并發(fā)連接數(shù)達(dá)到 1 億。如下圖所示:

為交叉驗(yàn)證,同時(shí)截取了 EMQX dashboard 監(jiān)控統(tǒng)計(jì),如下圖,從左下角 Connections 監(jiān)控可以看出并發(fā)連接維持在 1 億。

單實(shí)例 100G bps 帶寬壓測,阿里云 NLB 控制臺(tái)監(jiān)控如下圖所示,單實(shí)例吞吐已達(dá) 320+Gbps。

洛神云網(wǎng)絡(luò)打造的 NLB 網(wǎng)絡(luò)型負(fù)載均衡系統(tǒng)

洛神云網(wǎng)絡(luò)基于阿里云分布全球的物理網(wǎng)絡(luò)基礎(chǔ)設(shè)施,構(gòu)建了超大規(guī)模虛擬網(wǎng)絡(luò),來提升網(wǎng)絡(luò)的可靠性、可連接性和彈性。通過十余年的積累,洛神云網(wǎng)絡(luò)為用戶提供了單地域支持百萬 VPC,單 VPC 支持百萬計(jì)算節(jié)點(diǎn)的超大規(guī)模;51.2T 云上云下互聯(lián)帶寬、3500 萬 MPS 彈性 RDMA 的超高性能;200G 網(wǎng)絡(luò)服務(wù)分鐘級(jí)交付、SLB 0~百萬級(jí) QPS 任意伸縮的極致彈性?；谶@樣的能力,洛神云支撐起了各行各業(yè)用戶全球范圍內(nèi)的各種形態(tài)的連接方式。

NLB 網(wǎng)絡(luò)型負(fù)載均衡是阿里云洛神云網(wǎng)絡(luò)面向萬物互聯(lián)時(shí)代推出的全新一代高性能四層負(fù)載均衡系統(tǒng),支持超高性能和自動(dòng)彈性能力,用戶無需指定或手動(dòng)調(diào)整 NLB 的實(shí)例規(guī)格,實(shí)例性能會(huì)隨著業(yè)務(wù)增減自動(dòng)彈性伸縮,同時(shí)采用多層次容災(zāi)架構(gòu)設(shè)計(jì)保障實(shí)例的可用性,為用戶在端連接云時(shí),更好地做負(fù)載均衡和應(yīng)用的分發(fā),保障網(wǎng)絡(luò)的極致彈性,助力用戶輕松構(gòu)建高并發(fā)、高安全的物聯(lián)網(wǎng)平臺(tái)及應(yīng)用。

NLB 網(wǎng)絡(luò)型負(fù)載均衡在物聯(lián)網(wǎng)領(lǐng)域主要應(yīng)用于車聯(lián)網(wǎng)、智能家居、智能停車、視頻監(jiān)控等業(yè)務(wù)場景中,NLB 作為業(yè)務(wù)入口可以同時(shí)處理海量并發(fā)連接,同時(shí)提供 TCPSSL 卸載、連接限速等能力保障物聯(lián)網(wǎng)業(yè)務(wù)安全穩(wěn)定運(yùn)行。

全球最具擴(kuò)展性的云原生物聯(lián)網(wǎng) MQTT 消息服務(wù)器 EMQX

EMQX 是由 EMQ 推出的一款全球下載量超千萬的開源物聯(lián)網(wǎng) MQTT 服務(wù)器,提供從邊緣到云端的一站式設(shè)備接入解決方案,以彈性伸縮、安全可靠的方式為全球超 1 億臺(tái)物聯(lián)網(wǎng)設(shè)備提供安全可靠的海量數(shù)據(jù)連接、實(shí)時(shí)移動(dòng)與處理。如今,EMQX 已是全球最具擴(kuò)展性的開源物聯(lián)網(wǎng) MQTT 消息服務(wù)器,單集群支持 1 億物聯(lián)網(wǎng)設(shè)備連接,實(shí)現(xiàn)每秒百萬級(jí)消息吞吐,毫秒級(jí)消息分發(fā)時(shí)延等性能優(yōu)勢。

以 EMQX 為核心,EMQ 打造了支持大規(guī)模物聯(lián)網(wǎng)流數(shù)據(jù)存儲(chǔ)和實(shí)時(shí)分析的云原生流數(shù)據(jù)庫 HStreamDB 和運(yùn)行在物聯(lián)網(wǎng)邊緣的超輕量 MQTT 消息服務(wù)器 NanoMQ、用于工業(yè)協(xié)議解析轉(zhuǎn)換的工業(yè)網(wǎng)關(guān)軟件 Neuron 和可運(yùn)行在各類資源受限的邊緣設(shè)備上的輕量級(jí)物聯(lián)網(wǎng)邊緣分析/流式處理引擎 eKuiper, 共同構(gòu)成了 EMQ 面向未來的現(xiàn)代物聯(lián)網(wǎng)數(shù)據(jù)基礎(chǔ)設(shè)施。

未來,EMQ 繼續(xù)攜手阿里云洛神云網(wǎng)絡(luò)探索車聯(lián)網(wǎng)等關(guān)鍵應(yīng)用場景領(lǐng)域更深入的物聯(lián)網(wǎng)基礎(chǔ)設(shè)施解決方案,助力洛神云更好地服務(wù)企業(yè)數(shù)字化戰(zhàn)略,構(gòu)建高并發(fā)、高安全、高可靠的物聯(lián)網(wǎng)應(yīng)用。

審核編輯：湯梓紅