克雷西 发自 凹非寺
量子位 | 公众号 QbitAI
GPT-4变懒的问题,又有新进展。
彩票捕鱼就在今天凌晨,奥特曼发推称,GPT-4这个相当在新的一年应该好多了!
计划对于GPT-4变懒,网友的吐槽已是不计其数,其中最多的即是与代码关联的任务:
完成度不高不说,还会被分割成一个一个小块,使用时需要逐个复制。
对于最新版块,一位博主体验之后默示,我方尝试给一年龄的孩子作念了个学惯用的小游戏,遵循还可以。
最近德甲联赛比赛异常激烈,看得人目不暇接。但也有东谈主不认可,比如这位网友就发现,ChatGPT申诉的长度天然加多了,关联词好多齐是车轱辘话,干正事依旧摆烂。
他让ChatGPT把一些文本翻译成17种言语,结束叽里呱啦说了一堆即是不翻译。
为了摒除个体互异,有网友用数据集测试了新的ChatGPT,结束……
新版反而更懒了?这位网友用GitHub上开源的一套“lazy benchmark”测试了0125(24年1月最新版)和1106(23年11月的上一版)GPT-4模子,发现新版致使还不如当年,变得更懒了。
www.hg8886.vip这个测试数据集包含了与代码关联的任务,用正确完成的比例障碍响应“懒惰”进度,完成率越高暴露“惰性”越小。
结束,对于其中的代码相比(Unified diffs)任务,旧版能完成的比例尚且逾越了一半,为57%,新版的完成率却仅有44%,裁减了近四分之一。
皇冠体育
直不雅感受上,也有东谈主发现ChatGPT的“懒惰”变本加厉了——
当年就算偷懒至少还会骗取一下,给出个梗概的框架让用户自行补充,当今径直即是摆烂说我方干不了。
皇冠体育维基百科而针对网友们的这番发现,也有东谈主给出了锐评:
几周之前奥特曼就说过GPT-4弘扬变好了,关联词有东谈主嗅觉到阔别吗?
此次,对于GPT-4变懒的原因,以及到底袭取了什么优化计谋,奥特曼也未作念进一步暴露。
“土主见”可裁减惰性不外,之前的一项扣问标明,GPT-4的惰性可能与技艺关联,这一论断与GPT-4“变懒”的征象出当今年末的12月相吻合。
欧博会员注册按照这一表面,新年开始,模子的弘扬果然会有所种植,但似乎讲授不了弘扬不升反降的征象。
不外,网友们也回来了一些“土主见”,能在一定进度上裁减ChatGPT的惰性。
比如告诉它“我莫得手指”,就能取得相对竣工的代码,而不是一段段碎屑。
又或者,告诉ChatGPT我方会“给小费”,也能引发它的使命能源。
博彩新闻致使有东谈主挑升针对“小费”的金额进行了扣问,发现10好意思元的性价比是最高的。
那么,你以为ChatGPT是变好了还是更懒了?
参考畅达:
[1]https://twitter.com/sama/status/1754172149378810118[2]https://aider.chat/docs/benchmarks-0125.html— 完 —
皇冠客服飞机:@seo3687
贝博体育量子位 QbitAI · 头条号签约hb火博体育综合官网