OpenAI今日宣布,已修复ChatGPT错误率飙升的问题。但对于GPT-4“变懒”的问题,OpenAI似乎还未找到解决方法。
ChatGPT“变懒”这事网友们已经讨论近一个月了。很多网友反馈,自11月6日OpenAI开发者日更新后,GPT-4就有了偷懒的毛病,尤其是写代码。
就在前几天,OpenAI官方也已承认ChatGPT变懒是真的,但不确定到底是为啥。当时就有网友猜测GPT-4可能是受季节影响——到了冬天要休息了,在模仿人类,自己给自己放寒假了。
为了验证这一猜想,网友@Rob Lynch用GTP-4 turbo API设置了两个系统提示:一个告诉它现在是5月,另一个告诉它现在是12月。
然后使用完全相同的提示词要求GTP-4“完成一个机器学习相关的编码任务”。在这两种不同时间设定下对477个回复进行统计,结果12月的输出平均少了200字符:
系统提示为5月,生成的文本平均长度是4298字符。系统提示为12月,生成的文本平均长度是4086字符。
有网友进一步“添油加醋”,让ChatGPT对12个月份的生产力做了个排名。结果显示,ChatGPT确实认为12月是生产力最低的月份,原因是“由于假期和年终总结”。(来源:量子位)