华为推出了一款新的安卓应用程序，该应用程序利用图像识别和光学字符识别（OCR）等AI工具将流行的儿童书籍译成手语。

StorySign是由华为，非盈利的European Union for the Deaf，Penguin和动画大师Aardman合作开发的。

该应用程序适用于大多数安装了Android 6.0及以上版本的手机，华为表示它已经针对自己的AI手机进行了优化，例如华为Mate 20 Pro。

如何运作

鉴于手语因国家和地区而异，应用程序会要求你选择首选的手语种类。StorySign将支持英语，法语，德语，意大利语，西班牙语，荷兰语，葡萄牙语，爱尔兰语，比利时佛兰德语和瑞士德语的手语。

当你启动应用程序后，你可能会注意到里面有一本书《Where's Spot?》，这是Eric Hill于1980年出版的经典儿童故事。

这暗示了应用程序的核心问题之一，它发布的有点为时过早。除非你有该书的实体副本，否则你将无法使用此应用程序。

如果你有这本书，你或孩子可以将手机放到页面上。华为表示，使用图像识别技术，即使手机相对于书本的角度有问题，该应用程序也能够检测到文字，而OCR可以提高准确性。

“在华为，我们相信AI的力量，这项技术可以在世界上产生积极影响，”该公司的西欧首席营销官Andrew Garrihy表示，“我们创建了StorySign，以帮助有聋儿的家庭享受丰富的故事时间。”

潜力

从表面上看，StorySign应用具有很大的潜力，据全球卫生组织（WHO）统计，全球有大约4.6亿人患有“致残性听力损失”，其中有3400万是儿童。在此背景下，像StorySign这样的应用程序可以为数百万早期学习者提供享受书籍的机会。但如果它能与任何书籍实时协作，那将会更加实用。

事实上，你可以将Gruffalo和Wonky Donkey中的任何东西翻译成手语，这将是一个非常强大的AI功能。不过该应用目前只提供一本书，它还必须逐个逐步推出更多支持，使它显得有点平淡无奇。

然而，除了最近的一系列其他举措外，StorySign确实提供了如何进一步的证据，证明技术如何帮助弥合听力和非听力世界之间的差距。

今年早些时候，来自纽约大学的学生展示了一个原型应用程序，该应用程序将增强现实与机器学习相结合，以便在手语和书面英语之间进行转换。去年，加州大学圣地亚哥分校开发了一种手套，将手语转换为文本。

StorySign适合更广泛的探索，并为未来的发展奠定基础。European Union of the Deaf执行主任Mark Wheatley补充说：“我们非常希望它能够为聋人社区提供更多帮助，使更多的失聪儿童达到与听力儿童相同的阅读水平。我们也希望StorySign的推出能够支持更广泛的对话，确保欧洲各地聋人在生活的各个方面实现平等。”