每天听简报，了解最新科技、AI、软件资讯
大语言模型写代码究竟是真正理解逻辑，还是仅靠机械记忆训练集里的代码片段。为了回答这个问题，有开发者专门设计了一门名为终止开关的小众编程语言。这门语言针对大模型的固有弱点进行了对抗性设计，比如语法严重依赖字符计数、在语言规范中隐藏虚假规则，以及引入故意触发模型安全拦截的敏感词汇。在公开的基准评测中，即使是当前表现最好的大模型，在基础任务上也仅拿到六十六点八分，暴露出模型在脱离已有训练语料后的推理短板。
进度保存在本设备 · 登录同步