端到端手语翻译研究

为进一步改善聋哑学生高等教育教学环境，提升聋哑学生人才培养质量，对语音到手语的专项翻译进行了研究。提出了一种新型语音到手语的翻译方法，直接建立语音到手语编码的端到端识别模式，再将手语编码序列匹配输出由基动作组成的仿真手语动画，省去了传统语音到手语翻译过程中的各个中间步骤，避免了其间的误差积累，提升了翻译效率及准确率。实验结果表明，该端到端语音手语翻译方法能够达到较好的翻译效果，在教学应用中达到了预期效果，具有一定的现实应用前景。