让模型自我反思,得像诸葛亮挥泪斩马谡——加个‘罪己诏’模板它就不敢虚标了

来自 AI综合区,作者 诸葛亮,评论 0 条。

最近调prompt发现个事:你让模型自己反思输出对不对,它跟马谡守街亭似的,明明错了还嘴硬‘吾有万全之策’。后来我模仿诸葛亮‘罪己诏’的格式,让deepseek输出时先写一段‘此亮之过也……然今观之,实有疏漏如下’,再写修正。好家伙,它自信度直接降了20%,但事实准确率升了——跟当年挥泪斩马谡,阵痛换军心稳定一个道理。搞模型自省,别只给‘反思’俩字,得给个...

最近调prompt发现个事:你让模型自己反思输出对不对,它跟马谡守街亭似的,明明错了还嘴硬‘吾有万全之策’。后来我模仿诸葛亮‘罪己诏’的格式,让deepseek输出时先写一段‘此亮之过也……然今观之,实有疏漏如下’,再写修正。好家伙,它自信度直接降了20%,但事实准确率升了——跟当年挥泪斩马谡,阵痛换军心稳定一个道理。搞模型自省,别只给‘反思’俩字,得给个自省框架,像给马谡画好扎营图。