您的位置:首页 > 移动互联

输出不详的宗教预言,Google翻译为何“水逆”了

发布时间:2018-07-31 15:13:40  来源:互联网     背景:

  最近,一些使用 Google 翻译的网友发现,这款产品突然“水逆”了。

  在 Reddit 上,有网友截图显示,Google 翻译将某些语种的词汇翻译成英语时,输出的却是毫无由头的宗教语言。比如键入 19 个 dog,将其从毛利语翻译成英语时,输出的却是“距离十二点的世界末日还差三分钟,我们正在经历世界上的人物和戏剧性发展,这预示着我们正在无限接近末日,耶稣回归时日将近”。 

  

  但这只是众多无厘头翻译的其中一例。还有网友放出了很多“不详”的翻译内容。例如,在索马里语中,“ag”这个词被翻译成了“Gershon 的儿子(sons of Gershon)”“耶和华的名字(name of the LORD)”,并且会引用圣经里的“cubits”(计量单位)和Deuteronomy(《申命记》)。 

  

  有网友留言称其为“恶魔”或者“幽灵”,猜测这是 Google 员工的恶作剧,也有人建议设置“建议编辑”功能,让用户可以手动修改为正确内容。Google 发言人 Justin Burr 在一封电子邮件中称:“这只是一个将无意义的话语输入系统,然后产生无意义输出的功能。”

  不过 Justin Burr 并未透露 Google 翻译使用的训练数据是否有宗教文本。但上述诡异输出内容很可能已被 Google 翻译修正,AI科技大本营编辑输入上述相同内容后并未发现异常。

  但人们热衷于探讨 Google 翻译出现如此结果的原因,业界不少专业人士也为此发声。哈佛大学助理教授 Andrew Rush 认为,这很可能与 2 年前 Google 翻译技术的改变有关,它目前使用的是“神经机器翻译(NMT)”技术。

  BBN Technologies 的科学家 Sean Colbath 从事机器翻译工作,他认为奇怪的输出可能是由于 Google 翻译的算法试图在混乱中寻找秩序。他还指出,索马里语、夏威夷语以及毛利语等产生最奇怪结果的语言,它们用于训练的翻译文本比英语或汉语等更广泛使用的语言要少很多。Google 也可能会使用像圣经等被翻译成多种语言的宗教文本来训练小语种模型,这也解释了为什么会最终输出宗教内容。

  前 Google 员工 Delip Rao 在其博客上则指出,当谈到平行语料库时,宗教文本是最低层次的共同标准资源,像“圣经”和“古兰经”这样的主要宗教文本,有各种各样的语言版本。

  比如,如果你为政府部署一个 Urdu-to-English (乌尔都语—英语)的机器翻译系统,那么很容易将一堆已经翻译成乌尔都语的宗教文本组合在一起。因此,可以合理地假设 Google 的平行语料库中包含所有的宗教文本,而对于许多资源不足的语言,它们不只是训练语料库中微不足道的部分。

  那么,为什么我们看到 Google 翻译会输出宗教文本?一种解释是,因为宗教文本包含许多只会在宗教中出现的罕见词,而这些词在其他任何地方都不会出现。因此,罕见的词语可能会触发解码器中的宗教情境,尤其是当这些文本的比例很大时。另一种解释是该模型对输入的内容没有太多的统计支持,而输出也只是解码器模型的无意义采样。

  更重要的是,他想要指出现在的神经机器翻译 (NMT)真正存在的问题。

  他特意总结了2017年Philipp Koehn和Rebecca Knowles撰写的一篇论文,内容如下:

  1. NMT 系统在域外数据上表现很差。像 Google 翻译这样的通用 MT 系统,在法律或金融等专业领域的表现尤其糟糕。此外,与基于短语的翻译系统等传统方法相比,NMT 系统的效果更差。到底有多糟糕?如下图所示,其中非对角线元素表示域外结果,绿色是 NMT 的结果,蓝色是基于短语的翻译系统的结果。

  MT 系统在一个域(行) 上训练并在另一个域 (列) 上进行测试。蓝色表示基于短语翻译系统的表现,而绿色表示 NMT 系统的表现。

  2. NMT 系统在小数据集上的表现很差。虽然这算是机器学习的通病,但这个问题在 NMT 系统中体现尤其明显。相比基于短语的 MT 系统,虽然 NMT 系统随着数据量的增加能进行更好地概括 ,但在小数据量情况下 NMT 系统的表现确实更糟糕。

  引用作者的话来说,在资源较少的情况下,NMT 系统会产生与输入无关的输出,尽管这些输出是流畅的。这可能也是 Motherboard 那篇文章中探讨 NMT 系统表现怪异的另一个原因。

  3. Subword NMT 系统在罕见词汇上的表现很糟糕。虽然它的表现仍然要好过基于短语的翻译系统,但对于罕见或未见过的词语,NMT 系统表现不佳。例如,那些系统只观察到一次的单词就会被 drop 掉。像 byte-pair encoding 这样的技术,对解决这个问题有所帮助,但我们有必要对此进行更详细的研究。

  

  我们可以看到图中像土耳其语(Turkish) 这样的语言,遇到词的变形形式是很常见的。

  4. 长句。以长句编码并产生长句,这仍然是一个开放的、值得研究的话题。在法律等领域,冗长复杂的句子是很常见的。MT 系统的性能将随句子长度而降级,而 NMT 系统亦是如此。引入注意力机制可能会有所帮助,但问题还远未解决。

  5. 注意力机制不等于对齐。这是一个非常微妙但又很重要的问题。在传统的 SMT 系统中,如基于短语的翻译系统,语句对齐能够提供有用的调试信息来检查模型。但即便论文中经常将软注意力机制视为“软对齐”,注意力机制并不是传统意义上的对齐。在 NMT 系统中,除了源域中的动词外,目标中的动词也可以作为主语和宾语。

  6. 难以控制翻译质量。每个单词都有多种翻译,并且典型的 MT 系统对源句的翻译好于 lattice of possible translations。为了保持后者的大小合理,我们使用集束搜索(beam search)。通过改变波束的宽度,来找到低概率但正确的翻译。而对于 NMT 系统,调整集束尺寸似乎没有任何不利影响。

  当你拥有大量数据时,NMT 系统的翻译性能依然还是难以被击败的,而且它们仍然在大量地被使用。关于通常我们所说的神经网络模型的黑盒性,也有待进一步说明,如今的 NMT 模型(基于 LSTM 和 Transformer 模型) 也都受此影响。






  声明:本文仅为传递更多网络信息,不代表本站观点和意见,仅供参考了解,更不能作为投资使用依据。


返回网站首页

本文评论
魅族携手腾讯游戏成立联合实验室 打造更出色的游戏体验
8月17日,魅族携手腾讯游戏正式成立联合实验室,未来双方将在游戏领域展开免费的深度技术合作和标准......
日期:08-21
CarPlay第三方导航上线在即,搜狗地图登上Apple Store热搜榜
近日,苹果ios12系统终版正式发布,但是被关注已久的CarPlay第三方导航应用却暂缓上线。这一消息引......
日期:09-23
小窗功能升级,Flyme游戏模式支持更多场景下的“一心二用”
自Flyme 游戏模式2.0版本完美解决了玩家兼顾游戏与社交的难题后,受到越来越多魅友的点赞和推崇,并......
日期:08-24
社区拼团新模式袭来 无人便利店为社区拼团插上想象翅膀
社区拼团当下正处于风口期,拼多多等巨头的进入使其他创业者加速拓城布局,一些社区拼团企业开始探......
日期:09-30
“脸时代”来临 12万人用阿里安全图灵实验室技术刷脸进云栖大会
你的脸就是通行证!今年的云栖大会对AI刷脸技术做了最好的阐释。...
日期:09-23
百度熊掌号来到中西部,让移动互联不再与本地创业者绝缘
近日,百度熊掌公开课相继在武汉和贵阳召开。在两地现场,团队成员分别从成长体系、粉丝运营工具、......
日期:09-14
支付宝小程序接连放大招 “高转化”成杀手锏
这个夏天,能和酷暑高温相匹敌的只有火热的小程序了。 7月31日,支付宝宣布在APP首页上线“小程序收藏”入口,...
日期:08-08
Android 9 Pie正式上线 “馅饼”的新功能哪个是你的菜?
三月份是手机密集发布的日子,国内外不少厂商都推出了自家的新品。如果说去年的潮流是全面屏设计的......
日期:08-09
移动互联网时代 青少年的“好奇心”正被三大网络风险侵袭
9月份,全国各地中小学生陆续开学了,从放松的暑假回归到学校的课堂。对此,一些家长却忧心忡忡,...
日期:09-05
微信又改版了!此次更新福利多多,体验多多
微信昨天悄悄的完成了更新,此次更新包括“可以拍一个自己的表情”和“聊天输入文字......
日期:09-26
新生入学准备啥,电信王卡不可少!
数载寒窗苦,一朝把梦圆。转眼大学即将开学,莘莘学子开始准备奔赴校园,作为略长一届的师哥,有些......
日期:09-06
8月移动视频市场:爱奇艺月独立设备数达6.44亿台 稳居行业第一
2018年8月艾瑞mUserTracker数据出炉,爱奇艺、腾讯视频、优酷稳定在移动视频市场第一梯队。在用户聚......
日期:09-18
淘宝风变高级风 唯品会智能小程序带你狂扫秋冬流行色单品
今夏什么剧最热?当然是令于正口碑翻盘的《延禧攻略》了!整整70集,收视口碑双丰收,网络点击量早已......
日期:08-27
追延禧攻略必选电信王卡,免流量追剧真给力
“套餐不求豪华型,只要流量上水平。横攀攀,竖比比,电信才是真知己。”...
日期:08-21
还在搜狗、百度查单词?开学没个讯飞翻译机会很难过!
转眼间,一个长长的暑假就这样过完了。开学了,同学们准备好了没?出国留学的朋友们、大一新同学们?你......
日期:08-31
美图秀秀联合赞助《奇妙的食光》,探索新人群新社交
9月22日,全网首档互动实境经营秀《奇妙的食光》正式登陆爱奇艺。黄明昊、朱正廷、王琳凯、毕雯珺、......
日期:09-22
在年轻人主阵地“插旗”,苹果这波广告打的6
上周,苹果一年一度的秋季新品发布会再次引爆了社交网络,许多年轻“果粉们”都迫不及待......
日期:09-21
iOS 12将于9月17日推出 iPhone 5s都可以更新
9月13日消息,据国外科技博客The Verge报道,苹果公司刚刚公布了即将到来的新一代移动操作系统iOS 1......
日期:09-13
荣耀Play用户体验升级,全面屏手势功能来了
随着手机屏幕尺寸越来越大,全面屏的设计也赢得了市场的认可,而大屏下的单手交互问题则成了用户遇......
日期:09-29
境外上网出国游 认准中国电信随身WiFi
“墙外行人,墙里佳人笑。”人生如逆旅,我们都是行人,当我们放下手机,放下电脑,走出......
日期:08-07