打臉奧特曼，GPT-4今年比去年還懶！網友在線實測出爐
GPT-4變懶的問題，又有新進展。
就在今天凌晨，奧特曼發推稱，GPT-4這個毛病在新的一年應該好多了！
圖片
關于GPT-4變懶，網友的吐槽已是不計其數，其中最多的就是與代碼相關的任務：
完成度不高不說，還會被分割成一個一個小塊，使用時需要逐一復制。
對于最新版本，一位博主體驗之后表示，自己嘗試給一年級的孩子做了個學習用的小游戲，效果還不錯。
圖片
但也有人不認同，比如這位網友就發現，ChatGPT回復的長度雖然增加了，但是很多都是車轱轆話，干正事依舊擺爛。
他讓ChatGPT把一些文本翻譯成17種語言，結果嘰里呱啦說了一堆就是不翻譯。
圖片
為了消除個體差異，有網友用數據集測試了新的ChatGPT，結果……
新版反而更懶了？
這位網友用GitHub上開源的一套“lazy benchmark”測試了0125（24年1月最新版）和1106（23年11月的上一版）GPT-4模型，發現新版甚至還不如以前，變得更懶了。
圖片
這個測試數據集包含了與代碼相關的任務，用正確完成的比例間接反應“懶惰”程度，完成率越高說明“惰性”越小。
結果，對于其中的代碼比較（Unified diffs）任務，舊版能完成的比例尚且超過了一半，為57%，新版的完成率卻僅有44%，降低了近四分之一。
圖片
直觀感受上，也有人發現ChatGPT的“懶惰”變本加厲了——
以前就算偷懶至少還會糊弄一下，給出個大概的框架讓用戶自行補充，現在直接就是擺爛說自己干不了。
圖片
而針對網友們的這番發現，也有人給出了銳評：
幾周之前奧特曼就說過GPT-4表現變好了，但是有人感覺到差別嗎？
圖片
這次，關于GPT-4變懶的原因，以及到底采用了什么優化策略，奧特曼也未做進一步說明。
“土辦法”可降低惰性
不過，之前的一項研究表明，GPT-4的惰性可能與時間相關，這一結論與GPT-4“變懶”的現象出現在年末的12月相吻合。
圖片
按照這一理論，新年伊始，模型的表現的確會有所提升，但似乎解釋不了表現不升反降的現象。
不過，網友們也總結了一些“土辦法”，能在一定程度上降低ChatGPT的惰性。
比如告訴它“我沒有手指”，就能得到相對完整的代碼，而不是一段段碎片。
圖片
又或者，告訴ChatGPT自己會“給小費”，也能激發它的工作動力。
甚至有人專門針對“小費”的金額進行了研究，發現10美元的性價比是最高的。
圖片
那么，你覺得ChatGPT是變好了還是更懶了？
