团队发布JudgeProfile框架与SubjectiveSet数据集
热点事件持续更新
团队发布JudgeProfile框架与SubjectiveSet数据集
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
研究团队提出 JudgeProfile 框架，用于理解并引导 LLM 评判者的主观性。该框架把 LLM 评判拆解为两部分：感知，即评判者如何跨清晰度、正确性、详细程度等属性比较两个回答；优先级，即各属性对最终选择的影响权重。 团队同时构建了 SubjectiveSet 数据集，包含 50,013 组回答对，由 21 个 LLM 评判者在 87 个属性上评估。
AI 根据报道生成 · 2 小时前更新
最新进展10月7日 12:00
JudgeProfile：理解并引导 LLM 评判者的主观性报道时间线
沿着报道，了解事件的不同侧面。
10月7日
- arXiv：cs.AIJudgeProfile：理解并引导 LLM 评判者的主观性
研究团队提出 JudgeProfile 框架，将 LLM 评判拆解为感知（跨清晰度、正确性等属性比较两个回答）与优先级（各属性对最终选择的影响权重）两部分，并构建了包含 50,013 组回答对、由 21 个 LLM 评判者在 87 个属性上评估的 SubjectiveSet 数据集。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。