用图片来提高机器翻译质量

麻省理工学院(MIT)、加州大学圣地亚哥分校(UCSD)和IBM的研究人员开发了一种可能会撼动机器翻译(MT)领域的机器学习模型:VALHALLA。

纵观机器翻译的历史,模型大多是通过使用基于文本的信息来运行。然而近年来,一些研究人员对多模态机器翻译(MMT)越来越感兴趣,这是一种在开发翻译时考虑多种输入形式(例如,文本和相应的图像)的机器翻译范式。VALHALLA即是利用计算机视觉来提高翻译质量的一个MMT例证。(来源