Motion Savvy想通过Leap Motion捕捉手语,让聋哑人也能“说话”

这是我看过最特别的产品演示。

Motion Savvy的联合创始人&CEO Ryan Hait-Campbell走上台用含混的发音介绍他自己时,我还在疑惑怎么都听不清楚他在说什么,接着我才突然意识到,他是一个聋哑人,是少数可以“说话”的聋哑人。

但就是这样一个聋哑人,在他还没有多费唇舌介绍产品、只是简单的讲了团队的想法以及用一段视频来告诉现场观众如果这个产品成功将改变什么时,台下已经掌声雷动。这个叫做Motion Savvy的产品正是针对聋哑人设计的,它想实现的目标是让聋哑人可以像正常人一样与人交流,更简单的来说,就是帮助聋哑人“说话”。

wade31

Motion Savvy其实包括硬件和软件两个部分。硬件部分是一个和iPad mini差不多大小的平板电脑,只不过上面会嵌入入Leap Motion的传感器,当用户(聋哑人)要说话时,由Leap Motion捕捉手语,接着就由Motion Savvy的软件来解读和翻译用户的手语,先把它翻译成文字显示在屏幕上,然后通过一个人工翻译的声音把这些话“说出来”。

Ryan播放了一个视频,里面是一个聋哑人带着Motion Savvy的平板电脑去超市购物:他拿出平板电脑做手语,问超市收银员他应该去哪儿找他想买的东西,这时平板电脑就像一个虚拟的翻译,或者说助手,把他用手语比划出来的内容用英语说出来,超市的收银员再告诉他应该怎么做。

聋哑人怎么能听懂超市收银员在说什么?Motion Savvy的另一位创始人、CTO Alex Opalka后来告诉我,Motion Savvy的翻译需要先经过“文字翻译”这一步,也就是当聋哑人用手语表达自己的想法时,Motion Savvy会先通过手势捕捉把它翻译成文字,再由平板电脑发音;反过来,当聋哑人需要听别人的说话内容时,Motion Savvy的系统会先把对方的声音转成文字,显示在平板电脑上。这样双方就可以交流。当然也有不少聋哑人可以通过读唇语来理解别人在说的话——Alex就是如此,我和他的交流就是通过他看我说话时的嘴形来理解我的话,然后他再说出来。是的,他是说出来的。

“我很幸运,我是聋哑人中仅占1%的、通过训练可以正常说话的人。我五岁的时候父母确认我失聪了,但并不是完全聋哑。幸运的是父母给我买了很贵的机器来帮我学说话,可并非每个聋哑人都这么幸运的,那一个助听器或者翻译器就要好几千美元,不是每个家庭都负担得起。所以我们想做这样一个产品,让聋哑人不用花大钱去买那些昂贵的机器,通过比手语就可以说话。”Alex对我说。

到目前为止,Motion Savvy还没有正式发布,也暂时只支持美式手语。Alex介绍说,就像世界上有很多种语言,“手语”这另一种语言也各不相同,“就是英式手语和美式手语都不一样的。”他说Motion Savvy过去这一年里都在为系统“录入”手语信息,“暂时我们只能做到美式手语,理想情况下,我们想把它做成一个系统,就像Google Translate,一端是你输入的语言,一端是翻译出来的语言。但这是以后5-10年的事情了,我们暂时还在做这个系统,它很花时间,我们要尽可能的找用户来用,现在就美式手语这一块,已经算是比较精确了。”

Alex说,为了保证手语的准确,Motion Savvy的录入过程不使用众包模式。“可以说,我们监测着录入手语的每一步。”

他们计划将盈利分为两种:第一是出售给个人用户,“平板电脑、配件、包括Leap Motion的传感器一整套,计划售价600美元,软件使用订阅模式。因为这个手语的词库是持续更新的,用户买了设备后,每个月花20美元来订阅软件;换句话说,如果用户不想用我们的平板电脑,用其他能支持Leap Motion的设备,只要他们自己有Leap Motion,一样可以通过订阅我们的软件来使用,这是我们所设想的让尽可能多地用户使用它的方法。”第二种则是出售给企业客户和政府。CEO Ryan在演示时说现在Motion Savvy已经开始和一些聋哑学校合作了。

不过这个创业公司将面临的挑战也很明显,不同种类的手语录入本身就是个大工程,再加上不使用众包模式来确保精确,势必需要投入很大的人力和财力;另一方面他们依赖Leap Motion的感应器,现在Leap Motion的关注重点还在PC和Mac端,对Motion Savvy来说,手机才是他们最终的目标。“最终肯定是要和用户的手机连在一起的,手机才是人们每天携带的硬件。”

聋哑人真的可以正常说话吗?或许有一天,科技可以实现这个梦想。

订阅更多文章

你可能感兴趣的: