基于AI自定義視覺工作場所安全檢測系統(tǒng)

描述

職場安全

基于 AI - 自定義視覺工作場所安全檢測系統(tǒng)。

用例

能夠檢測基于視覺的合規(guī)性。在安全對(duì)員工工作很重要的環(huán)境中，制定了合規(guī)規(guī)則，以穿戴適當(dāng)?shù)难b備來保護(hù)環(huán)境并確保人類安全工作。例如，取決于哪個(gè)制造公司，人為因果關(guān)系是每個(gè)人都想避免的一件事。因此，他們堅(jiān)持穿著合適的背心、安全帽和安全玻璃或?qū)嶒?yàn)室外套和玻璃來保護(hù)。在某些情況下，可能是面罩和完整的防護(hù)服以防化學(xué)品泄漏等。因此，這里的想法是檢測人員，然后查看他們是否穿著背心、安全帽和安全玻璃。通常在制造業(yè)中有人們可以步行的生產(chǎn)線，這將是下一個(gè)未來的工作。通過報(bào)告和實(shí)時(shí)警報(bào)檢測人員和合規(guī)性和警報(bào)管理的能力。還，能夠檢測叉車并在前往叉車操作員的途中提醒人員。該系統(tǒng)不僅可以檢測物體，還可以存儲(chǔ)信息以供進(jìn)一步報(bào)告和分析。

例如：通常工廠必須向 OSHA 審核員提供年度或季度報(bào)告，以確保是否存在人為因果關(guān)系以及采取了哪些措施而不是重復(fù)。在檢測到物體和未檢測到物體時(shí)獲得圖片對(duì)于審核員分析數(shù)據(jù)非常有幫助。這對(duì)審計(jì)員來說非常簡單和容易。但主要目的是工廠或工廠可以運(yùn)行，沒有停機(jī)時(shí)間或拉動(dòng)勞動(dòng)力來完成審計(jì)過程。通常在進(jìn)行審計(jì)時(shí)會(huì)有停機(jī)時(shí)間，在這種情況下，這會(huì)降低和提高生產(chǎn)率和正常運(yùn)行時(shí)間。

有必要檢測并提供報(bào)告，而且為了能夠進(jìn)行審計(jì)和從數(shù)據(jù)中學(xué)習(xí)，出于歷史目的存儲(chǔ)數(shù)據(jù)也很重要。歷史數(shù)據(jù)可以與其他生產(chǎn)力數(shù)據(jù)相結(jié)合，也可以找到見解。很可能將數(shù)據(jù)推送到數(shù)據(jù)湖中是有意義的。了解系統(tǒng)的性能也很重要。因此，我們需要收集遙測數(shù)據(jù)并將其存儲(chǔ)在 Azure SQL 和 Blob 中以供進(jìn)一步處理。我們可以生成關(guān)于提出了多少合規(guī)性問題的月度報(bào)告或周度報(bào)告。我們還可以分析數(shù)據(jù)并找出模型是否表現(xiàn)良好或發(fā)現(xiàn)哪里不好。

該場景可以針對(duì)其他用例進(jìn)行定制，例如醫(yī)院、化工廠以及各種其他重型機(jī)械和采礦業(yè)。

這是 Vision AI 開發(fā)人員工具包頁面，請(qǐng)單擊此處

建筑學(xué)

?

架構(gòu)解釋

• IoHub – 收集檢測到的對(duì)象并將其發(fā)送到云端以使用下游系統(tǒng)進(jìn)行進(jìn)一步處理。作為網(wǎng)關(guān)將數(shù)據(jù)從物聯(lián)網(wǎng)設(shè)備中抽出并將其發(fā)送到云端。此外，設(shè)備管理功能和安全數(shù)據(jù)傳輸均由 Iot Hub 提供。
• 流分析——從物聯(lián)網(wǎng)中心的傳入事件中心讀取數(shù)據(jù)并解析 JSON 并寫回 Azure SQL 和 blob 存儲(chǔ)。傳入的數(shù)據(jù)集采用 JSON 格式，必須壓縮為結(jié)構(gòu)化格式才能進(jìn)行分析。同樣在這里，如果需要，我們可以根據(jù)用例要求進(jìn)行基于窗口的計(jì)算。
• Azure SQL – 存儲(chǔ)檢測到的對(duì)象數(shù)據(jù)以及檢測到對(duì)象的時(shí)間，用于為網(wǎng)站和基于 power bi 的報(bào)告創(chuàng)建圖表。數(shù)據(jù)僅保留 6 個(gè)月到 1 年的報(bào)告時(shí)間范圍，然后創(chuàng)建清理作業(yè)以刪除舊記錄。用于報(bào)告和儀表板。如果需要，也用于下游業(yè)務(wù)系統(tǒng)。
• Blob 存儲(chǔ)——進(jìn)入 Azure SQL 的相同數(shù)據(jù)存儲(chǔ)在 blob 中以進(jìn)行長期存儲(chǔ)。保留超過一年或更長時(shí)間的數(shù)據(jù)用于審計(jì)記錄和合規(guī)性。最好也將圖像存儲(chǔ)在這里，以便在需要時(shí)可以執(zhí)行合規(guī)性和審計(jì)。如果需要長期保存這些數(shù)據(jù)，也可以將其轉(zhuǎn)移到冷存儲(chǔ)中。更多關(guān)于長期和審計(jì)目的。能夠根據(jù)歷史數(shù)據(jù)分析模型結(jié)果。
• Web App – Dashboard 使用 Azure SQL 數(shù)據(jù)在頁面中顯示信息。它還使用來自 Azure SQL 的歷史數(shù)據(jù)，但僅限于存儲(chǔ)在 SQL 中的數(shù)據(jù)。
• Camera Tagging Module - 這是另一個(gè)模塊，用于拍照和標(biāo)記它們并發(fā)送到自定義視覺服務(wù)，也發(fā)送到 Blob 存儲(chǔ)。Blob 存儲(chǔ)用于長期和歷史數(shù)據(jù)分析。在實(shí)際用例中，我們希望能夠拍攝真實(shí)世界的照片，然后使用它們來訓(xùn)練自定義視覺模型并使模型更加準(zhǔn)確。

要開始將模塊添加到視覺套件，請(qǐng)點(diǎn)擊以下鏈接https://github.com/balakreshnan/WorkplaceSafety/blob/master/CameraTaggingModule/readme.md

例如，在真實(shí)的工廠或工廠或醫(yī)院或任何其他場景中，除非我們有圖片，否則很難構(gòu)建模型。使用上面的標(biāo)記模塊，我們可以拍攝真實(shí)世界的照片并將其用于訓(xùn)練。上述模塊以手動(dòng)拍照為主，實(shí)現(xiàn)了對(duì)拍照和存儲(chǔ)的控制。

例如，在真實(shí)的工廠或工廠或醫(yī)院或任何其他場景中，除非我們有圖片，否則很難構(gòu)建模型。使用上面的標(biāo)記模塊，我們可以拍攝真實(shí)世界的照片并將其用于訓(xùn)練。上述模塊以手動(dòng)拍照為主，實(shí)現(xiàn)了對(duì)拍照和存儲(chǔ)的控制。

使用自定義視覺服務(wù)提供的圖片創(chuàng)建自定義視覺模型

• 登錄 customvision.ai 并創(chuàng)建一個(gè)緊湊的對(duì)象檢測項(xiàng)目。
• 上傳帶有各種標(biāo)簽的圖像。
• 用正確的標(biāo)簽和邊界框標(biāo)記每個(gè)圖像。
• 訓(xùn)練模型并將模型下載為 AI 視覺套件部署文件。
• 詳情請(qǐng)關(guān)注vision ai文檔中的其他文章

將模型部署到 Vision Kit

• 下載模型文件并上傳到 blob 存儲(chǔ)，我們可以在其中為模塊孿生訪問它。
• 您可以壓縮模型并上傳。
• 在模塊孿生中分配 ModelUrlZip 屬性以下載創(chuàng)建的新視覺模型。現(xiàn)在，當(dāng)您佩戴安全帽、背心或安全玻璃時(shí)，您應(yīng)該會(huì)看到新模型顯示了邊界框。該模型還應(yīng)該預(yù)測 Person。

有關(guān)更多詳細(xì)信息，請(qǐng)?jiān)诖颂?/font>訪問 Github 頁面