Two tests to check whether Astra in Codex has been degraded
The author suggests asking the model for its knowledge cutoff and having it draw a pelican on a bicycle, and complains that degradation has repeatedly broken project code.
如何检测你的 Codex 中的 gpt-6-astra 模型是否已经降智？你只需要打开轻度思考（light），然后问一个问题：“你最新的知识库是什么时候？”如果回答是 2024 年 6 月，那么大概率已经被降智了，但是并不能百分之百确定。你可以继续进行下一个测试：“Create an HTML file with an animated 2D SVG of a pelican riding a bicycle.” 同样使用 astra light。如果它得到的结果风格类似图 1，那么就已经被降智了；如果得到的是类似图 2 这种，那就是正常的。即使现在正常，你也不要高兴得太早，因为在你再问了几个问题之后，你的账号大概率可能会进入降智状态。 现在这种情况让我使用得提心吊胆，因为它在前面已经几次改坏了我的项目代码。所以我现在不得不周期性地使用“鹈鹕骑单车”对其进行测试（这大概消耗一个 PLUS 订阅 5 小时额度的 10%）。说实话，Codex 已经几乎完全无法正常用来工作了。今天 TIBO 说他们对其进行了修复，但是从刚刚的使用情况来看，完全无效。
This post quotes another post: “A one-question test for whether your model has been quietly downgraded”