帶有Spresense的情感和導(dǎo)航可穿戴設(shè)備

描述

描述

我是一名工程師，現(xiàn)在我正在完成我的碩士學(xué)位。作為我論文的一部分，我開始研究情緒，這促使我開始一個項(xiàng)目，騎自行車可以通過情緒來管理。

你有沒有感到憤怒或悲傷？如果你騎自行車并且系統(tǒng)讓你選擇路線和目的地以改善你的感受或感受你想要的感覺怎么辦？

我非常喜歡騎自行車去任何地方，去我的工作，去我的大學(xué)和我能去的任何地方，但我也非常喜歡騎車時的美景。在這里，我想到了一個自主導(dǎo)航系統(tǒng)的想法，它能夠根據(jù)你想要感受的情緒改變你的路線。

例如：我住在一個有河流的城市，它讓我感到快樂和動力，所以如果我感到悲傷，那么系統(tǒng)應(yīng)該推薦我走這條路。但是，如果我開始騎行并在途中感到壓力怎么辦？那么系統(tǒng)應(yīng)該會推薦我乘坐像河流一樣的風(fēng)景。

在這里，我檢測到一個問題，如果我必須注意視野和景點(diǎn)，必須有一個自主導(dǎo)航系統(tǒng)。對于汽車，有很多選擇，但對于自行車，可用的系統(tǒng)很少。因此，該項(xiàng)目的第一部分包括為自行車創(chuàng)建一個自主和解放雙手的導(dǎo)航系統(tǒng)。第二部分包括創(chuàng)建一個 ML 系統(tǒng)來識別情緒并在移動設(shè)備上運(yùn)行它，項(xiàng)目的第三部分包括將所有內(nèi)容與基于谷歌地圖的導(dǎo)航系統(tǒng)集成。

是的！直到這是一個大項(xiàng)目，我正在為我的學(xué)位論文和其他愛好完成其中的一部分。雖然我知道這是一個大項(xiàng)目，但是在學(xué)習(xí)和工作之間的每一分鐘，我都在這個項(xiàng)目中工作。

過程（我做了什么）

目前我的工作分為兩部分：自行車語音導(dǎo)航系統(tǒng)和 ML 情緒識別。

對于 ML 識別系統(tǒng)，我使用了 Empatica E4 腕帶 從許多情況下獲取生物信號來標(biāo)記一些情緒。該理論說，可以確定 4 個象限之間的情緒矢量，作為平面中的矢量。這個模型被稱為 Arousal-Valence Emotion plane，從不同的情緒中獲取一些生物信號數(shù)據(jù)讓我可以訓(xùn)練一個分類系統(tǒng)。

目前，我正在使用 Edge Impulse 訓(xùn)練我的模型以在移動設(shè)備上運(yùn)行該模型，但我仍在改進(jìn)訓(xùn)練數(shù)據(jù)的測試。所以，我期待繼續(xù)上傳那部分的進(jìn)展。

另一方面，我正在用索尼的 Board Spresense 解放雙手，為我的自行車騎行語音導(dǎo)航系統(tǒng)。我正在利用電路板聲音管理的優(yōu)勢來運(yùn)行 ML 系統(tǒng)，如果你說向右、向左或停止，它就會說打開燈。

該系統(tǒng)是整個項(xiàng)目的第一部分，這是進(jìn)展情況。

2)解放雙手語音導(dǎo)航系統(tǒng)

第一次開始測試麥克風(fēng)時，我在當(dāng)?shù)匾患疑痰曩I了兩個通用麥克風(fēng)，但這些麥克風(fēng)太糟糕了，無法正常工作。所以經(jīng)過多次嘗試，我不得不根據(jù)索尼的推薦購買新的麥克風(fēng)。上買了兩個我這么說，以防萬一你想測試通用麥克風(fēng)，但請記住，當(dāng)?shù)厣痰隂]有給我任何數(shù)據(jù)表或類似的東西。

另一方面，我開始訓(xùn)練 ML 模型來識別以下命令：“左”、“右”、“停止”以及與我想要的指令不符的所有其他命令。我按照 Edge Impulse 示例訓(xùn)練 ML 系統(tǒng)對“ok google”或“hello Siri”等短語做出反應(yīng)。但我會在其他教程中發(fā)布它以縮短它。

目前，我仍在編程，等待新的麥克風(fēng)并期待完成我的論文和這個項(xiàng)目。所以，如果我有新的進(jìn)展，我會在這里發(fā)布。:D

感謝給我這次比賽的機(jī)會，我想發(fā)布一些東西來表明我已經(jīng)盡我所能。但是，由于我對許多項(xiàng)目的目標(biāo)設(shè)定太差，所以我遇到了問題，但我仍在努力解決它。不過別擔(dān)心，我還在努力。

?