纽约大学学生开发AR应用 实时翻译手语
虽然Magic Leap可能计划在不久的将来为AR头显带来手语翻译,但纽约大学的学生们已经证明,今天的智能 手机 搭配一款原型应用就可以实现这样的壮举。
借助计算机视觉和增强现实,ARSL应用程序能够帮助用户通过智能手机摄像头捕捉手语,并将其实时翻译成相应的母语。反过来,这款应用程序同样可以将口语翻译成手语。
这款原型是由纽约大学Tandon工程学院的计算机系学生Heng Li,Jacky Chen和Mingfei Huang联合开发,而他们得到了Connected Futures Prototyping and Talent Development项目的支持。这是纽约市 媒体 实验室和Verizon之间的合作产物,主要 投资 增强现实,虚拟现实和人工智能等新兴技术。
Verizon扩展现实解决方案平台Envrmnt的XR产品开发主管Christian Egeler在一份声明中表示:“当优秀的学生与Envrmnt团队的杰出导师结合时,魔法就诞生了。通过帮助他们参与至前沿项目并构建未来的技术,我们发现了下一代的人才。”
Connected Futures Prototyping and Talent Developmen计划在今年资助十多个项目,这其中就包括手语翻译应用。其他应用程序包括Impromptu和Dreamine:前者是一种多用户AR体验,可让非专业音乐人是演奏音乐;后者则是可以把创意导入AR 游戏 的粘土套装。
纽约市媒体实验室的主管Justin Hendrix表示 “纽约市媒体实验室十分高兴能有机会将Verizon与纽约市市各所大学的技术和创意人才连接起来。我们很开心可以继续推进虚拟显示和增强现实,以及人工智能的原型设计,而这些主题仍然是纽约市媒体实验室关注的重点领域。”
目前尚不清楚所述应用是否将登陆App Store会Google Play。Verizon的一名发言人表示, 商业 发行应用并非是这一项目的目标,但部分团队(有可能包括ARSL)将寻求在未来发行应用。
Li表示:“我们知道我们只是触及了这个长期困扰着全球手语社区的问题的冰山一角,但我们希望继续采访我们的终端用户以获取他们的反馈。我们同时希望采访该领域的专家,以探讨其他新兴技术是否能提供帮助。”
来源:映维