跳到正文

#教程/实践

今日 6 条
7月22日周三
7月20日周一
7月16日周四
  1. Hugging Face:Blog(RSS)61

    IBM Research:模型路由看似简单,实则是系统优化问题

    IBM Research 分享在智能体系统中构建模型路由的经验,认为路由不应被当作分类问题而是系统优化问题。在 AppWorld Test Challenge 上用 CodeAct 智能体实测 417 个任务,Claude Sonnet 4.6 总成本 $79($0.19/任务),反而低于单价更低的 GPT-4.1 的 $155($0.37/任务),差异源于缓存命中。

    推荐理由:作者基于 AppWorld 实测给出路由成本、难度与延迟被低估的三点原因,并分享了可迁移的优化思路。

7月13日周一
7月10日周五
  1. Hugging Face:Blog(RSS)68

    Hugging Face 发布 Profiling in PyTorch 系列第三篇:用 profiler 对比各注意力实现

    Hugging Face 发布 Profiling in PyTorch 系列第三篇,用 profiler trace 对比手写注意力、in-place 掩码、SDPA math/efficient/flash/cuDNN 各后端的 kernel 表现。

    推荐理由:原文用 profiler trace 逐一对比 PyTorch 各注意力实现的 kernel 差异,读者可以学到一套先猜测再看 trace 的可迁移分析方法。

7月6日周一
  1. Hugging Face:Blog(RSS)45

    PRX Part 4:我们的数据策略

    PRX 系列第 4 篇披露其数据策略:预训练数据由公开与内部数据集混合而成,用 VLM 重新生成图像长描述,再转为可流式读取的语料。团队改用 Qwen3-VL 在训练中实时计算文本 latent,实测吞吐仅损失约 3–4%(30 天训练多约 1 天),并采用 Lance 构建、MDS 流式的双格式流程,图像统一以 JPEG quality 92 编码。

7月1日周三
6月27日周六
6月23日周二
6月3日周三
6月2日周二
5月29日周五
5月19日周二
  1. Sierra:Blog(RSS)34

    Sierra 谈语音 AI 的转录难题:多供应商集成与上下文感知如何降低错误率

    Sierra 构建了一套动态路由多家供应商的转录平台,通过并行查询多个转录模型并融合输出,内部基准显示可将话语错误率平均降低约 25%,在转录提升空间更大的语言中最高降低 37%。该平台还支持 70 多种语言,并将对话上下文注入转录过程,使金融服务智能体的输入验证率提升超 25%,整体解决率最高提升 1%、重大转录错误最多减少 15%。

5月11日周一
  1. Together AI 研究与产品博客(RSS)68

    Together AI 解析 DeepSeek-V4 服务化:百万 token 上下文为何是推理系统工程问题

    Together AI 发文解析 DeepSeek-V4 的服务化挑战,认为其核心变化是在 token 轴压缩 KV cache 的混合注意力设计(CSA、HCA、SWA),使模型支持 1M token 上下文窗口。

    推荐理由:原文基于 Together 在 HGX B200 上的实际 bring-up,给出 KV cache 布局和缓存策略如何决定 DeepSeek-V4 长上下文吞吐的具体经验。

5月8日周五
5月5日周二
  1. OpenAI Developers(RSS)66

    OpenAI 发布 gpt-realtime-2 语音模型提示词指南

    OpenAI 发布 gpt-realtime-2 实时语音模型提示词指南,该模型是用于低延迟语音到语音应用的推理模型。上下文窗口从 32k 扩展到 128k tokens,指南建议从最小提示词起步按测试补指令、用低推理档位、用 preamble 管理等待体验,并在调用工具前逐位确认订单号、邮箱等高精度标识符。

    推荐理由:原文给出 gpt-realtime-2 的提示词设计规则,覆盖推理档位、工具确认和实体捕获等可落地做法。

4月22日周三
  1. Sierra:Blog(RSS)62

    Sierra 重塑工程面试流程,用 AI-native onsite 替代编码与算法面试

    Sierra 宣布重构工程面试流程,取消了编码和算法面试,改用由 Plan、Build、Review 三环节组成的 AI-native onsite,候选人可在 2 小时内自选 AI 工具完成搭建。公司还把电话初筛换成系统设计面试,并试点考察 1 到 N 迭代能力的 debugging 面试。作者称新流程信号更丰富、体验更好,不过开放式格式难以标准化,需配套评估标准和双人面试来校准。

4月21日周二
  1. Together AI 研究与产品博客(RSS)31

    面向 AI 原生团队的多租户 GPU 集群设计指南:如何做到容量共享而不冲突

    面向 AI 原生团队的多租户 GPU 集群设计需同时满足池化容量、租户隔离与自助访问三项要求,避免为每个团队单独建集群导致 GPU 夜间和周末闲置。架构上采用共享层加租户层的两层模式,共享层由集中控制面管理高性能存储与 InfiniBand/Ethernet 网络,租户层为每个团队提供专属 GPU 节点、存储 PVC 及自选编排层(Kubernetes、Slurm 等)。

4月17日周五
3月12日周四
  1. OpenAI Developers(RSS)67

    OpenAI 发布 Sora 2 提示词指南

    OpenAI 发布 Sora 2 提示词指南,更新至最新 API 能力,包括角色引用(可上传动物或对象并复用)、1920×1080 或 1080×1920 高分辨率导出、时长上限从 12 秒提高到 20 秒、基于完整原始片段的视频续写,以及支持异步批量生成的 Batch API。

    推荐理由:OpenAI 官方系统讲解 Sora 2 提示词写法,并覆盖角色引用、更长时长和视频续写等新 API 能力。

3月11日周三
  1. Mistral AI:News(网页)62

    Mistral 详解如何基于 Vibe 构建自动编写 RSpec 测试的 Rails 智能体

    Mistral AI 基于 open-source 编码助手 Vibe 构建了一个自主智能体,可读取 Rails 源文件、生成或改进 RSpec 测试,并通过 RuboCop 和 SimpleCov 自定义工具在 CI/CD 中无人工干预运行。

    推荐理由:Mistral 详述了在 Vibe 上构建 Rails 测试智能体的上下文工程与自定义工具方案,给出可复用的步骤和实测分数。

2月25日周三
  1. OpenAI Developers(RSS)79

    OpenAI 发布 gpt-5.3-codex 提示词指南

    OpenAI 发布 Codex 模型(API 中为 gpt-5.3-codex)的提示词指南,推荐 medium 推理力度作为交互编码的平衡选择,高难度任务可用 high 或 xhigh。

    推荐理由:官方给出从 GPT-5 系列迁移到 gpt-5.3-codex 的提示词、工具和 phase 参数细节,可直接照做。

2月14日周六
1月22日周四
12月16日周二
  1. OpenAI Developers(RSS)71

    OpenAI 发布 gpt-image-1.5 提示词指南,讲解生成与编辑的最佳实践

    OpenAI 开发者 Cookbook 发布 gpt-image-1.5 图像模型提示词指南。该模型在写实度、准确性和可编辑性上较前代有明显提升,支持高质量渲染与低延迟场景。指南给出提示词结构、显式约束、迭代式小步修改等方法,并用信息图、照片级写实、UI 模型、Logo、风格迁移、虚拟试穿、多图合成、儿童绘本角色一致性等示例演示生成与编辑工作流。

    推荐理由:官方指南给出提示词结构、约束写法和质量与延迟取舍方法,示例覆盖生成与编辑的常见生产场景,可直接迁移到实际工作流。

12月11日周四
  1. OpenAI Developers(RSS)79

    OpenAI 发布 GPT-5.2 提示词指南,覆盖迁移映射与生产级提示模式

    OpenAI 发布 GPT-5.2 提示词指南,称其在企业级和智能体工作负载中提升了准确性、指令遵循、token 效率和多模态理解,但默认 reasoning_effort 为 none 且仍对提示词敏感。

    推荐理由:OpenAI 官方给出 GPT-5.2 的提示词模式与迁移步骤,开发者可以直接套用其中模板和 evals 流程。

11月20日周四
11月19日周三
10月27日周一
10月22日周三
10月13日周一
  1. Answer.AI 官方研发博客(RSS)50

    如何用 SolveIt 把 Karpathy 的 tokenizers 视频做成书稿章节

    Answer.AI 的 Jeremy Howard 用 SolveIt 把 Andrej Karpathy 两小时 tokenizers 视频教程改写成带可运行代码、超链接和图片的书稿章节。他采用两阶段"双对话"流程:先把带时间戳的转录稿拆成小段逐条补充超链接、代码示例等素材,再用充实后的转录稿分节撰写正文,避免一次性让 AI 转换导致内容平淡、遗漏概念和幻觉。

8月14日周四
  1. OpenAI Developers(RSS)48

    OpenAI API 速率限制指南:RPM、TPM 与用量层级详解

    OpenAI 发布 API 速率限制指南,说明速率限制按组织级和项目级而非用户级设定,并随所用模型不同而变化。限制指标包括 RPM、RPD、TPM、TPD、IPM 及部分流式音频模型的每分钟音频分钟数,任一指标先触顶即受限。付费用量层级分为 Build、Launch、Grow,随累计充值额自动升级,层级越高速率限制越高。