2012 创新杯：将手语翻译成口语的手套

该项目最终赢得了在澳大利亚悉尼举行的微软 Imagine Cup 全球决赛的软件设计类冠军，并因此获得了捧回闪亮银杯的荣誉。这个项目的初衷十分单纯。一群来自乌克兰的学生注意到他们学校的几名运动员患有听力障碍，他们想帮助他们更好地交流。这一愿望最终促成了一副手套的诞生，手套上装满了传感器，可以理解手语手势，并将其翻译成基于文本和音频的语音，准确率高达 90%。而这还只是原型。

在 Team Quadsquad 开发的 Enable Talk 系统中，每只手套都有 11 个弯曲传感器（每根手指两个，手掌一个），还有两个加速计、一个陀螺仪、一个指南针和一个蓝牙模块，蓝牙模块可将手套在用户打手势时收集的所有数据传输到移动设备。“我们把原型交给了（我们学校的运动员们），”团队成员马克西姆·奥斯卡说。“一开始，我们认为只有手指就够了，但他们说他们想要更广泛的手势。”因此，团队添加了所有额外的功能，让手套不仅可以识别通过弯曲手指形成的字母，还可以识别由更多手势组成的单词和句子。

在 Quadsquad 团队向 Imagine Cup 评委做最后陈述时，一名戴着手套的成员打出“很高兴见到你”的手势，一部使用 Microsoft Speech API 的手机快速地大声重复了一遍。观众中传来了一声“哦”。Enable Talk 系统是用户自学的，因此可以根据不同国家的手语和个人手势习惯进行定制。在 Imagine Cup 中，Quadsquad 团队使用系统的神经网络将美国手语翻译成英语，但用户可以教它任何他们想要的手势，并让它们与 Microsoft Speech API 支持的任何语言相对应。因此，从理论上讲，你甚至可以编造自己的手语。显然，教会系统你可能想说的每一个词会花太长时间，所以最终团队希望为用户提供一套可下载的不同手语的标准手势包，供用户开始使用。手套的电池寿命为 8 小时，但可以通过背面的太阳能电池板充电延长电池寿命。

传感器获取的细节水平确实令人印象深刻。在演示过程中，满屏的图表（如上图所示）向评委和观众展示了当戴着手套的团队成员挥动、转动双手和弯曲手指时，每个传感器的读数。如果他只弯曲小指，那么只有小指会显示读数。其他传感器保持静止。在整个演示过程中，系统从未出现过故障，只会说“我们喜欢 Imagine Cup”和“我们想看袋鼠”之类的话。不过，Team Quadsquad 并不满足于 90% 的准确率。“我们当然要争取 99.9% 的准确率，”Osika 说道。赢得 Imagine Cup 可能会给他们实现目标所需的动力。