跳到正文
热点事件持续更新

LLMRec 基准发布:评测多款 LLM 推荐任务

1 篇报道1 个报道来源19 小时前更新

先了解这件事

AI 综述

研究者 Junling Liu 等发布基于大语言模型的推荐系统基准 LLMRec,在评分预测、序列推荐、直接推荐、解释生成和评论摘要五项任务上评测 ChatGPT、LLaMA、ChatGLM 等现成模型,并开源代码、处理后的数据与基准结果。 结果显示,LLM 在序列推荐和直接推荐等准确性任务上仅表现中等,但在可解释性任务上达到与 SOTA 方法相当的水平;团队还评估了监督微调对提升 LLM 指令遵循能力的效果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.AI
    LLMRec:在推荐任务上评测大语言模型

    研究者提出基于 LLM 的推荐系统 LLMRec,在评分预测、序列推荐、直接推荐、解释生成和评论摘要五项任务上评测 ChatGPT、LLaMA、ChatGLM 等现成大语言模型。基准结果显示,LLM 在序列推荐和直接推荐等准确性任务上仅表现中等,但在可解释性任务上达到与 SOTA 方法相当的水平。团队还评估了监督微调对提升 LLM 指令遵循能力的效果,并开源了代码、处理后的数据与基准结果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。