基于STM32的聋哑人辅助系统

技术特征：

1.基于stm32的聋哑人辅助系统，其特征在于，包括智能传感模块、姿态捕捉模块、多模态交互模块、双向通信模块以及自学习算法模块；其中，

2.根据权利要求1所述的基于stm32的聋哑人辅助系统，其特征在于，所述智能传感模块包括数据捕捉单元、信号转换单元以及数据处理单元；其中，

3.根据权利要求2所述的基于stm32的聋哑人辅助系统，其特征在于，所述数据处理单元包括：

4.根据权利要求1所述的基于stm32的聋哑人辅助系统，其特征在于，所述姿态捕捉模块包括数据接收单元、数据融合处理单元以及三维姿态重建单元；其中，

5.根据权利要求4所述的基于stm32的聋哑人辅助系统，其特征在于，所述三维姿态重建单元包括：

6.根据权利要求1所述的基于stm32的聋哑人辅助系统，其特征在于，所述多模态交互模块包括视觉反馈单元、触觉反馈单元以及结果生成单元；其中，

7.根据权利要求6所述的基于stm32的聋哑人辅助系统，其特征在于，所述结果生成单元包括：

8.根据权利要求1所述的基于stm32的聋哑人辅助系统，其特征在于，所述双向通信模块包括语音输出单元、语音接收单元、语音识别单元以及指令转换单元；其中，

9.根据权利要求1所述的基于stm32的聋哑人辅助系统，其特征在于，所述自学习算法模块包括数据收集单元、深度学习训练单元、优化算法单元以及性能评估单元；其中，

技术总结
本发明涉及聋哑人辅助通信技术领域，具体涉及基于STM32的聋哑人辅助系统，包括智能传感模块、姿态捕捉模块、多模态交互模块、双向通信模块、自学习算法模块以及能源管理模块；其中，智能传感模块：集成有柔性压力传感器和电容式接触传感器，并安装于每个手指的指节位置，用于对手指每一次弯曲和接触的动态数据进行捕捉；姿态捕捉模块：结合来自智能传感模块的手指动态数据与内置加速度计和陀螺仪的数据，通过STM32微控制器进行数据融合处理，实现手部及手腕的三维姿态实时捕捉。本发明，通过采用多模态交互和自学习算法显著提升手语识别精确度和交互自然性，同时降低成本，增强学习体验，促进聋哑人与听力正常人的有效沟通。

技术研发人员：余文荣,周露,李晴,许坤,蒋文景,刘浩东,钱严澔
受保护的技术使用者：常州信息职业技术学院
技术研发日：
技术公布日：2024/9/29