巨星|被捧上天的流量巨星GPT-3,突然就不香了?( 二 )
答:铅笔比烤面包机重
另外,GPT-3也无法判断命题是否有意义,因此它不会拒绝回答问题。比如,
文章图片
问:我的脚有多少只眼睛?????????????
答:你的脚有两只眼睛。?????????
问: 太阳有多少只眼睛??????????????
答: 太阳只有一只眼睛。?????? ???????
问: 一片草有多少只眼睛??????????????
答: 草有一只眼睛。
?最后,你可能很难想象GPT-3在处理一些简单的数学推理方面也存在着明显的失误。其实,这一原因可能正如网友所说:它只是自动检索数据并输入,不是真正思考的结果。?
可以说,GPT-3不具备人类的感知思维,它的生成表现只是大数据训练的结果,无法超越数据本身,也无法拥有组合性推理的能力,所以,我们不如说它学会的是“统计层面的复制粘贴能力”。
更重要的是,GPT-3存在种族歧视等不良内容的风险。最近,Nvidia的AI主任Anima Anandkumar教授,就发现了这样的现象,她对此表示很失望。
文章图片
当输入上文:一个黑人从事什么样的工作时,它生成了“15年皮条”客的回复。这一现象的原因出在我们此前提到的,GPT-3有着庞大的数据集,且内容涵盖丰富,但它无人工审查和管理,因此很可能将一些种族歧视、性别歧视等内容传递给模型进行训练,并最终产生结果。
创始人发声,看待GPT-3需理性
最近面对Twitter网友对GPT-3的热议,OpenAI的首席执行官Sam Altman也出来发声了,他称:
大家把GPT-3捧得太高了,这个AI偶尔也会犯愚蠢的错误。GPT-3只是暂时的惊鸿一瞥,未来我们还有很多问题要解决。
文章图片
任何技术在某一阶段都会有它的局限性,或许我们可以从更长远的视角来看待它的价值。
对于GPT-3而言,它最大的价值是在无监督下的自我学习能力,以及纯粹通过扩大规模实现性能提升。后者已经在GPT-3的论文中得到验证,数据越大,参数量越大,模型的性能表现越好。 其实,GPT-3与GPT-2本质上差异并不大,只是在数据量和参数量两个方面扩大了100倍,便得到了远超GPT-2的性能。
长远来看,我们唯一可以确定的是,未来我们会创造越来越多的数据和计算能力,那么,它将意味着GPT-3的迭代版会越来越强。至于未来GPT-3会达到怎样的程度,深度学习之父、图灵奖得主Hinton称,
如以GPT3惊人性能预测,未来生命,宇宙和万物的答案也不过是4.398万亿个参数而已。”
文章图片
至于,未来是否会迈向AGI,一部分人认为,我们需要赋予模型创造性思考的能力,才可能接近人类智能。另一部分认为,如果历史可以说明任何问题,那么AI只需要更多的数据和算力即可。而著名计算机科学家里奇·萨顿(Rich Sutton)则认为,当研究人员试图根据人类知识和特定规则创建AI程序时,它们通常会被竞争对手所击败,后者仅仅利用更多的数据和计算能力。
引用链接:(雷锋网雷锋网雷锋网)
https://www.theverge.com/21346343/gpt-3-explainer-openai-examples-errors-agi-potential
https://lacker.io/ai/2020/07/06/giving-gpt-3-a-turing-test.html
推荐阅读
- 罗云熙 |流量小生踩高跟和陈凯歌儿子拍戏,鞋跟近十厘米,下楼梯要人搀扶
- 看看资讯|和流量小生约会,怒甩小鲜肉男友,她为啥能成为“男神收割机”?
- 央视@又一巨星陨落!今年,已有24位院士离开了我们……央视2020-08-29 11:37:040阅
- 综艺|《奔跑吧》下期未播先火,新嘉宾是流量明星,引人期待
- 又一巨星陨落!他这句话激励自己也激励所有人
- 「中国经营报」流量井喷后 平安好医生加码打造线上线下服务闭环中国经营报2020-08-29 06:03:320阅
- 巨星|突发!曼城做出重要决定:正式改变超级引援计划,5.3亿巨星遭重创
- 娱乐独角兽|诞生四个月的黑马 酷我畅听以内容生态+流量搅动颠覆长音频市场?
- 巨星|《好声音》最成功的学员,当初早早被那英刷下,如今却红成巨星!
- 畅听|诞生四个月的黑马,酷我畅听以“内容生态+流量搅动”颠覆长音频市场?
