本项目基于dpcas项目开发,源码地址
- dpcas(Deep Learning Componentized Application System):深度学习组件化应用系统。
- 为了更好更快的将已有的模型进行快速集成,实现应用。
- 该项目会尝试推出其它类型或是不同行业领域的项目应用。
- 虽然它才刚刚诞生,有各种不足,但是我会继续改进,努力让更多人看到它,希望它不仅仅是一个demo。
针对于聋哑人与健全人交流不便的问题
我尝试做出这样一种系统,实时将手语翻译为语音,也能将语音翻译为手语动画
我在努力中
- 手语 -> 语音
- 手部坐标跟踪
- 手指角度解析
- 手势识别
- 实时切帧,对连续帧的处理
- 手势与手语库的对应
- 语义合成
- 文字转语音
- 语音 -> 手语/文字
- 语音转文字
- 语句转化为手语
- 手语动画的显示