带有Spresense的情感和导航可穿戴设备

描述

描述

我是一名工程师，现在我正在完成我的硕士学位。作为我论文的一部分，我开始研究情绪，这促使我开始一个项目，骑自行车可以通过情绪来管理。

你有没有感到愤怒或悲伤？如果你骑自行车并且系统让你选择路线和目的地以改善你的感受或感受你想要的感觉怎么办？

我非常喜欢骑自行车去任何地方，去我的工作，去我的大学和我能去的任何地方，但我也非常喜欢骑车时的美景。在这里，我想到了一个自主导航系统的想法，它能够根据你想要感受的情绪改变你的路线。

例如：我住在一个有河流的城市，它让我感到快乐和动力，所以如果我感到悲伤，那么系统应该推荐我走这条路。但是，如果我开始骑行并在途中感到压力怎么办？那么系统应该会推荐我乘坐像河流一样的风景。

在这里，我检测到一个问题，如果我必须注意视野和景点，必须有一个自主导航系统。对于汽车，有很多选择，但对于自行车，可用的系统很少。因此，该项目的第一部分包括为自行车创建一个自主和解放双手的导航系统。第二部分包括创建一个 ML 系统来识别情绪并在移动设备上运行它，项目的第三部分包括将所有内容与基于谷歌地图的导航系统集成。

是的！直到这是一个大项目，我正在为我的学位论文和其他爱好完成其中的一部分。虽然我知道这是一个大项目，但是在学习和工作之间的每一分钟，我都在这个项目中工作。

过程（我做了什么）

目前我的工作分为两部分：自行车语音导航系统和 ML 情绪识别。

对于 ML 识别系统，我使用了 Empatica E4 腕带 从许多情况下获取生物信号来标记一些情绪。该理论说，可以确定 4 个象限之间的情绪矢量，作为平面中的矢量。这个模型被称为 Arousal-Valence Emotion plane，从不同的情绪中获取一些生物信号数据让我可以训练一个分类系统。

目前，我正在使用 Edge Impulse 训练我的模型以在移动设备上运行该模型，但我仍在改进训练数据的测试。所以，我期待继续上传那部分的进展。

另一方面，我正在用索尼的 Board Spresense 解放双手，为我的自行车骑行语音导航系统。我正在利用电路板声音管理的优势来运行 ML 系统，如果你说向右、向左或停止，它就会说打开灯。

该系统是整个项目的第一部分，这是进展情况。

2)解放双手语音导航系统

第一次开始测试麦克风时，我在当地一家商店买了两个通用麦克风，但这些麦克风太糟糕了，无法正常工作。所以经过多次尝试，我不得不根据索尼的推荐购买新的麦克风。上买了两个我这么说，以防万一你想测试通用麦克风，但请记住，当地商店没有给我任何数据表或类似的东西。

另一方面，我开始训练 ML 模型来识别以下命令：“左”、“右”、“停止”以及与我想要的指令不符的所有其他命令。我按照 Edge Impulse 示例训练 ML 系统对“ok google”或“hello Siri”等短语做出反应。但我会在其他教程中发布它以缩短它。

目前，我仍在编程，等待新的麦克风并期待完成我的论文和这个项目。所以，如果我有新的进展，我会在这里发布。:D

感谢给我这次比赛的机会，我想发布一些东西来表明我已经尽我所能。但是，由于我对许多项目的目标设定太差，所以我遇到了问题，但我仍在努力解决它。不过别担心，我还在努力。