項目背景

傳統(tǒng)網(wǎng)絡(luò)數(shù)據(jù)分析會在交換機上配置網(wǎng)絡(luò)數(shù)據(jù)鏡像， 將?Packet?復(fù)制后發(fā)送到目標(biāo)機器，實現(xiàn)網(wǎng)絡(luò)流量鏡像的功能。而在云平臺上，目前網(wǎng)絡(luò)數(shù)據(jù)采集還沒有統(tǒng)一的方案。

針對私有云平臺，目前有流表數(shù)據(jù)包復(fù)制采集，在?hypervisor?上監(jiān)聽采集、vmware?平臺分布式虛交換機配置采集、libpcap?抓包采集等方案。對于?vmware?平臺分布式虛交換機配置采集的方案，性能較好，不占用客戶機資源，但其屬于商業(yè)產(chǎn)品，且只適用于購買?vmware?私有云用戶；而在?hypervisor?上監(jiān)聽采集，目前有產(chǎn)品開發(fā)，性能較好，但只適用于?OpenStack?私有云；采用?OVS?流表方案，優(yōu)勢是免費，不占用客戶機資源，但是配置復(fù)雜，且只能用于?OpenStack?私有云。

因此，開發(fā)基于libpcap + GRE封裝轉(zhuǎn)發(fā)的應(yīng)用，或許是云平臺目前最優(yōu)的網(wǎng)絡(luò)流量鏡像方案。其使用簡單、開源、適用于各類公有云和私有云。

Packet-Agent 簡介

Netis Packet Agent?基于libpcap技術(shù)，從業(yè)務(wù)網(wǎng)卡抓包，進(jìn)行 GRE 封裝后將采集到的數(shù)據(jù)包發(fā)送到另一臺遠(yuǎn)端機器，供分析使用。

該項目提供一套低開銷但是高性能的抓包工具：

• pktminerg?是第一個發(fā)布的工具。該工具可以輕松地在網(wǎng)卡上抓數(shù)據(jù)包，用GRE頭進(jìn)行封裝并發(fā)送到遠(yuǎn)端的設(shè)備，來進(jìn)行數(shù)據(jù)包監(jiān)控和分析

?

• pcapcompare?用于比較兩個 pcap 文件
• gredump?根據(jù)特定的過濾規(guī)則抓取GRE數(shù)據(jù)包，并存儲為 pcap 文件
• gredemo?是一個 demo 應(yīng)用程序，可以從 pcap 文件讀取數(shù)據(jù)包，然后把它們發(fā)送到遠(yuǎn)端網(wǎng)卡。這個程序只能通過源代碼編譯生成

Docker Kubernetes 支持

Packet-Agent 對 Kubernetes 也提供了支持方案。簡單來說，Packet-Agent封裝成容器后，與需要監(jiān)控的業(yè)務(wù)容器放在同一個 K8S Pod 中，與其共享網(wǎng)絡(luò)層并抓包鏡像網(wǎng)絡(luò)流量。具體方案見項目文檔。

參與 Packet-Agent 項目

歡迎大家參與此項目，包括 star, fork, 提交 pull-request, 報告 bug, 提出任何意見或建議，或者將該項目介紹給相關(guān)的朋友。衷心感謝。