雨果巴拉:行业北极星Vision Pro过度设计不适合市场

Magic Leap手语、文本翻译系统为听力、言语障碍者提供有效交流

文章相关引用及参考:reality

识别环境中手语与文本的混合现实系统

映维网 2018年03月16日)根据一份最新公布的专利,我们发现了关于Magic Leap的又一个神秘的故事。Magic Leap最新专利的说明和图例描述了通过头显设备检测和翻译手语的方法。专利文件的另一部分详细介绍了使用头显识别标牌和店面的文字,并将其翻译成头显显示信息。Magic Leap将这种方法称为手语与文本翻译的“感官眼镜”。

具体来说,这份专利申请描述了“用于识别环境中手语与文本的混合现实系统…这些实施例能够有效地支持残疾者实现的更多交互…感官眼镜系统可以识别和翻译手语,并且将翻译信息呈现给混合现实设备用户。”

尽管Magic Leap没有在第一代的Magic Leap One:Creator Edition中承诺这种功能,但显然这家公司正在研发相关的技术,并且旨在为聋哑社区创造一个全新的沟通世界。

专利中的图例说明了头显用户正在使用手语进行交互。从设备用户的视角来看,我们可以看到手语的具体信息,以及潜在的回应选项。除了允许手语人士与非手语人士进行无缝沟通之外,这样的应用还将允许世界各地的手语用户进行有效的交流。

专利文件写道:“大多数人都不知道任何手语。聋哑人士和谈话对象掌握的也可能是不同的手语。这可能妨碍与听力障碍者或言语障碍者的交谈。因此,可穿戴系统可以把谈话对象的手势进行成像,并将其转换为文本或图形(系统用户可以理解的手语手势),然后显示与该手势相关联的信息(将其翻译成用户可以理解的语言),这样将能极大地帮助改进用户与谈话对象之间的交流。”

专利描述的另一个功能是文本翻译,文件写道:“可穿戴系统可以识别用户环境中的文本,修改文本,并用修改后的文本遮挡原始文本。”

这有可能成为开创性的手语功能,因为这可以立即消除外国旅人的语言障碍。例如,系统可以将路标上的汉字翻译成英语。实际上,智能手机已经开始搭载相关的应用,而且效果不错。但如果能够把类似的功能嵌入至智能头显,这个过程将更加无缝。

在下面的专利图中,我们看到带有中文“银行”和“商场”字样的文本翻译成对应的“Bank”和“Shopping Center”。

除了翻译功能外,“感官眼镜”同时可以帮助用户读取难以知觉的文本。

专利文件的另一部分写道:“可穿戴系统可以令头显以不同的字体大小显示文本。可穿戴系统还可以提高文本的显示质量。例如,诸如雾、霾、雨、亮光、弱光、弱光,或者字符与周围图像之间的颜色对比度等环境因素有可能妨碍用户清晰地感知周围的文本,这时可穿戴系统将呈现能够增加文本清晰度的标志。”

Magic Leap最新的专利在应用上超出了游戏和娱乐范畴,但它们同样非常重要。当然,映维网仍然认为Magic Leap需要通过游戏、影视和体验体验来吸引大众的注意力,因为所述领域的市场显然更大。但像实时手语翻译和文本翻译的基本辅助性功能可以帮助Magic Leap进一步融入至大众生活,有助于帮助其从一款奢侈设备变为绝对的必需品。

本文链接https://news.nweon.com/42622
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯