据arXiv预印本论文，作者Mohammad Zangooei、Peyvand Teymoori、Mohammad Robati Shirzad与Soroosh Shahtalebi提出CPA（反事实成对增强）方法，用于提升小型语言模型作为逐点评判器的表现。论文称，逐点标签在微调中难以确定判定边界，CPA为每个逐点样本合成并审核一个针对同一查询、意图携带相反标签的反事实回答，将接受的样本对构造成成对任务，让评判器联合在逐点与成对数据上微调、部署时仅用逐点模式。论文的二阶分析称，联合训练可在成对损失平坦处保持逐点最优、在陡峭处吸收其曲率，从而优于分别训练后合并专家的做法。在Qwen3-8B的LoRA适配器上针对六项二元标准测试，论文称CPA使标准平均逐点macro-F1较仅逐点训练提升2.5个百分点，并在所有测试合并权重下于六项标准上均优于模型合并；同时比其评估的最强零样本前…
arXiv论文提出CPA方法：反事实成对增强提升小型逐点LLM评判器
arXiv