跳到正文
热点事件持续更新

LLM-jp发布LLM-jp-4技术报告

1 篇报道1 个报道来源15 小时前更新

先了解这件事

AI 综述

LLM-jp 发布 LLM-jp-4 技术报告,提出一组日语主权大语言模型,包含 8B 稠密模型和 32B-A3B MoE 模型,两者均从零开始基于约 12 万亿 tokens 训练。 团队称已为训练数据、外部模型和软件设定明确的筛选标准,并公开开发流程,以支持独立验证与复现。 评测显示其较此前 LLM-jp 模型有大幅提升,与同规模开放权重模型相比具备竞争力;33B 稠密模型的结果未包含在本版本中,将在后续修订中补充。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.CL
    LLM-jp-4 技术报告:8B 稠密与 32B-A3B MoE 的日本主权大模型

    LLM-jp-4 是一组日本主权大语言模型,包含 8B 稠密模型和 32B-A3B MoE 模型,均从零开始基于约 12 万亿 tokens 训练。团队为训练数据、外部模型与软件设定了明确的筛选标准并公开开发流程,以支持独立验证与复现。评测显示其较此前 LLM-jp 模型大幅提升,与同规模开放权重模型相比具备竞争力;本版本未包含 33B 稠密模型结果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。