基于手语的识别与翻译播报系统

发布时间：2015-10-4 阅读量：2009 来源: 我爱方案网作者:

【导读】各种逐渐成熟的翻译软件在帮助不同国度的人更加方便的交流时，确没能照顾到另一个特殊群体：无法讲话的残障人士。他们与外界的交流只能通过手语，而手语是一门除了这些人之外很少有人会的语言，不过这款系统能完美的为它们和普通人之间搭起一道沟通的桥梁。

概述：

这款多功能手套不仅能捕获用户静态手势，还能识别手在三维空间的各种方向的平动和转动，实现完整的手部运动信息检测。从而为翻译打好基础，并且该手套不仅具有手语翻译功能，而且还可以通过上位机展示其他丰富的功能，例如：空中鼠标，数字手势识别等。

工作原理：

数据手套采用了最流行的一款六轴（三轴加速度+三轴角速度(陀螺仪)）传感器 MPU6050 加上磁力计 HMC5883L 补偿算法组成九轴姿态传感器，配合弯曲传感器来检测手的运动和手势，

九轴姿态传感器安装在手套背面，它可以负责识别各种手语动作的欧拉角、加速度和角速度等值，而弯曲度传感器则分别安装在每根手指上，用来识别手指的弯曲程度。

使用 STM32 芯片作为数据采集芯片、采集传感器的数据并作初步的处理，然后以NRF24L01 作为无线数据传输模块把初步数据传送给 LM3S811 主控制器作进一步处理，完成核心算法，最后我们采用XFS5152CE语音合成模块来实现手语手势的翻译播报功能。

系统框图：

应用领域：

该手套可以在六大领域中得到应用：

1.数字手势识别与播放

2.字母手势识别与播报

3.文本输入与播报

4.交流场景模拟

5.空中鼠标

6.家居控制

在很多领域都可以起到很大的作用。

相关资讯

近日，日产汽车和总部位于英国的自动驾驶初创公司Wayve签署协议，合作开发基于人工智能的驾驶辅助系统。

京东开启招聘存算一体芯片设计工程师计划，薪酬高达“40K-100K*20薪”

日本芯片制造商铠侠（Kioxia）计划于2026年在其岩手县晶圆厂开始生产新一代NAND闪存芯片。

一系列诉讼指控芯片制造商英特尔、AMD及德州仪器公司，未能有效阻止其技术被用于俄罗斯制造的武器。