ucla 手势转成语音技术让沟通变得顺畅

UCLA这次把手势转成语音的技术,让沟通变得特别顺畅。他们推出的轻量级手套,不仅解决了现有设备笨重的问题,还特别适合长时间佩戴。这个手套用的是柔韧耐用的聚合物材料,只有2克重,戴在手上几乎感觉不到。导电纱线被拉成细长条,沿着手指关节铺展,这样动作就不会受限,而且能精确捕捉到指尖的细微动作。这个系统还有个隐形的管道,能把手势转成语音。传感器捕捉到的机械形变信号先被送到手腕处的迷你电路板处理,然后通过蓝牙传给手机。手机里的机器学习模型在0.3秒内就把这些信号解码成英语语音。这次测试邀请了4位长期使用美式手语的失聪志愿者来试试这个系统。他们在安静的实验室里重复标准手势,共测试了660个符号,覆盖了26个英文字母和0到9的数字。每个人都做了900次动作,系统的识别率达到了94.7%。当手势连续出现时,漏识率甚至降到了1%以内。研究者还在眉心和唇侧贴了两枚传感器来捕捉面部信息,结果发现这对提高准确率贡献了8%。虽然这个系统已经能在1秒内识别出一个单词,但还有两个挑战:词汇量和速度。目前模型只覆盖了大约1500个常用符号,还有25000个美式手语词汇需要覆盖。为了解决这个问题,团队打算改进算法和升级传感器采样率,争取把识别速度再提升30%。UCLA这个研究给听障人士带来了更自然的表达方式,也让更多人能通过玩手套轻松入门手语。这次技术革命把沟通的障碍打破了,可能用不了多久,一次温暖的握手就能完成一次无碍的对话。