手语识别系统
基于深度学习的实时手语识别
应用介绍
本系统是一款基于深度学习的实时手语识别应用，能够将手势动作转换为文字，帮助听障人士与健听人士进行沟通。系统支持60+种常见手语词汇，并能将连续手势组合成完整句子。
技术原理
系统采用先进的计算机视觉技术和深度学习模型，通过摄像头捕获手势动作，经过预处理后输入到训练好的PyTorch模型中进行识别。识别结果通过WebSocket实时传输到前端，并由句子生成器组合成完整句子。
使用说明
1. 确保摄像头权限已开启
2. 点击"开启摄像头"按钮启动视频流
3. 在摄像头前做出清晰的手势动作
4. 系统会实时识别并显示结果
5. 连续做出手势，系统会自动生成句子
问候类手势
- 你好: 右手伸直，掌心向外，左右摆动
- 谢谢: 右手握拳，拇指向上，向前摆动
- 再见: 右手伸直，掌心向外，左右摆动
情感类手势
- 我爱你: 右手伸出拇指、食指和小指，掌心向外
- 喜欢: 右手拇指和食指相碰，形成圆形，其余手指伸直
- 开心: 双手握拳，拇指向上，举到头部两侧
回答类手势
- 是: 点头，同时右手拇指向上
- 否: 摇头，同时右手掌向外推
- 不知道: 双手摊开，掌心向上
日常交流
- 我: 右手食指指向自己
- 你: 右手食指指向对方
- 帮助: 双手交叉放在胸前，然后向前伸出
生成的句子
控制面板
摄像头控制
视频上传识别
视频设置
检测设置
{{ detection_interval }}秒/次
当前设置: 每分钟{{ 60//detection_interval }}次
结果设置
{{ merge_window }}秒
相同结果在时间窗口内只显示一次