OracleProto：LLM预测评测框架发布
热点事件持续更新
OracleProto：LLM预测评测框架发布
1 篇报道1 个报道来源16 小时前更新
先了解这件事
AI 综述
Yiding Ma等作者发布可复现的LLM预测评测框架OracleProto，用模型知识截止约束和时间遮蔽为真实网络检索搭建“时间沙箱”，并通过泄漏检测审计信息边界，再把已解决事件重构成预测题。作者称，在300道FutureX-Past衍生问题、27组模型配置共24,300次预测试验中，经时间遮蔽和泄漏过滤后，检索结果残留泄漏仅1.37%。代码已公开。 该框架的用途是让LLM预测评测在受控、时间遮蔽的环境下进行。
AI 根据报道生成 · 59 分钟前更新
最新进展10月15日 12:00
OracleProto：基于知识截止与时间遮蔽的 LLM 预测基准测试框架报道时间线
沿着报道，了解事件的不同侧面。
10月15日
- arXiv：cs.AIOracleProto：基于知识截止与时间遮蔽的 LLM 预测基准测试框架
OracleProto 是一个可复现的 LLM 预测评测框架，通过模型知识截止约束与时间遮蔽构建时间沙箱，并对信息边界进行泄漏审计。在 300 道 FutureX-Past 衍生问题上，该框架评测了 27 组模型配置、共 24,300 次预测试验；时间遮蔽与泄漏过滤后检索结果残留泄漏仅 1.37%。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。