跳到正文

#图像生成

今日 16 条
8月17日周一
7月25日周六
  1. Midjourney:Updates(RSS)47

    Midjourney 发布 V8.2 图像模型

    Midjourney 推出 V8.2 图像模型,本次更新聚焦美学、图像质量与个性化。官方称图像将更具创意、大胆、精致、前卫和新颖,低质量图像的随机情况应会大幅减少。V8.2 的个性化档案拥有更大且更优的图像池,能更好理解用户个人品味,尤其适合在个人档案下积累了大量评分的用户。

7月23日周四
  1. Hugging Face:Blog(RSS)69

    Diffusers 原生集成 Nunchaku Lite 4-bit 扩散模型推理

    Hugging Face 宣布 Diffusers 原生支持 Nunchaku Lite,可像普通模型一样用 from_pretrained() 加载 SVDQuant 4-bit (W4A4) 检查点,无需单独推理引擎或本地 CUDA 编译,内核经 kernels 包从 Hub 下载。

    推荐理由:Diffusers 原生支持 Nunchaku 4-bit 推理,附带基准数据和自己量化模型的完整流程,适合关注消费级显卡跑扩散模型的读者。

  2. Midjourney:Updates(RSS)57

    Midjourney 宣布首次收购 Co–Star

    Midjourney 创始人 David Holz 宣布公司首次收购,对象是创始人 Banu 旗下的 Co–Star。Co–Star 将完全由 Banu 继续掌控和指导,她和团队加入 Midjourney 帮助围绕 Product 和 Design 建立更大的组织。

7月16日周四
7月6日周一
  1. Hugging Face:Blog(RSS)45

    PRX Part 4:我们的数据策略

    PRX 系列第 4 篇披露其数据策略:预训练数据由公开与内部数据集混合而成,用 VLM 重新生成图像长描述,再转为可流式读取的语料。团队改用 Qwen3-VL 在训练中实时计算文本 latent,实测吞吐仅损失约 3–4%(30 天训练多约 1 天),并采用 Lance 构建、MDS 流式的双格式流程,图像统一以 JPEG quality 92 编码。

7月1日周三
6月26日周五
6月17日周三
6月11日周四
  1. Midjourney:Updates(RSS)58

    Midjourney 将默认模型从 V7 切换为 V8.1

    Midjourney 宣布经过测试和反馈后,默认模型已从 V7 更新为 V8.1。V8.1 更聪明、更连贯,更好地遵循详细提示词并渲染文字;开启 HD 模式后图像尺寸为 V7 的两倍、分辨率 4 倍,SD 模式 4 秒、HD 模式 12 秒出图。风格参考、个性化与美学在 V7 与 V8.1 间保持一致;V7 的 omni-reference 仍可使用,V8.0 alpha 将在两周后弃用。

5月28日周四
5月22日周五
  1. Saining Xie45

    来看看 Jas 主导的 RAEv2。通过大量实验,我们发现了一些非常有趣的行为,说明为什么强大的表征编码器对像素解码器至关重要。 剧透:关键不在于爬 FID 的坡;像 ep@fid-k/fdr^k 这样的新指标表明,还有更多值得探索的空间!

    引用Jaskirat Singh@1jaskiratsingh

    In Oct last year, Representation Autoencoders provided an elegant solution to unified tokenization for understanding and generation. Today we make them a bit more simple. a bit more general. Result: >10x faster convergence, better reconstruction, better generation. And yes we test them on T2I and world models :) Introducing RAEv2

5月14日周四
5月7日周四
4月23日周四
  1. Google Research69

    Google Photos Auto frame 上线 3D 视角重排功能,可改变照片拍摄视角

    Google 宣布其新方法已在 Google Photos 的 Auto frame 功能中上线,用 ML 模型估计 3D 点图和相机参数,再用生成式扩散模型补全新视角下原先未拍到的内容,实现拍摄后的视角重排。方法分 3D 场景与相机估计、生成式修补两阶段,可自动调整人像构图并校正广角前置镜头的透视畸变,对含人物的合格照片提供单次操作的备选 rendition。

    推荐理由:原文拆解了 3D 场景估计与生成修补的两阶段方法,读者可以理解这种视角重排与普通生成式修图的区别。

4月6日周一
3月25日周三
3月6日周五
2月11日周三
2月3日周二
12月18日周四
12月16日周二
  1. OpenAI Developers(RSS)71

    OpenAI 发布 gpt-image-1.5 提示词指南,讲解生成与编辑的最佳实践

    OpenAI 开发者 Cookbook 发布 gpt-image-1.5 图像模型提示词指南。该模型在写实度、准确性和可编辑性上较前代有明显提升,支持高质量渲染与低延迟场景。指南给出提示词结构、显式约束、迭代式小步修改等方法,并用信息图、照片级写实、UI 模型、Logo、风格迁移、虚拟试穿、多图合成、儿童绘本角色一致性等示例演示生成与编辑工作流。

    推荐理由:官方指南给出提示词结构、约束写法和质量与延迟取舍方法,示例覆盖生成与编辑的常见生产场景,可直接迁移到实际工作流。

12月5日周五
  1. 美团 LongCat:HuggingFace 新模型54

    美团 LongCat 发布图像编辑模型 LongCat-Image-Edit

    美团 LongCat 发布图像编辑模型 LongCat-Image-Edit,为 Longcat-Image 的编辑版本,支持中英双语编辑。官方称其在开源图像编辑模型中达到 SOTA,支持全局编辑、局部编辑、文本修改和参考引导编辑,能保持未编辑区域的布局、纹理、色调和主体身份一致,适合多轮编辑。

12月4日周四
10月25日周六
  1. 美团 LongCat:HuggingFace 新模型61

    美团 LongCat 发布 13.6B 开源视频生成模型 LongCat-Video

    美团 LongCat 团队发布 13.6B 参数的开源视频生成基础模型 LongCat-Video,统一支持文生视频、图生视频和视频续写三类任务。模型在 Video-Continuation 上预训练,可生成长达数分钟的视频而不出现色彩漂移或质量下降,并通过粗到细策略和 Block Sparse Attention 在数分钟内生成 720p、30fps 视频。

10月22日周三
10月4日周六
  1. Sam Altman:Blog(RSS)57

    Sam Altman:Sora 即将加强版权方角色控制并尝试视频生成变现

    Sam Altman 宣布 Sora 即将推出两项更新:一是给版权方更细粒度的角色生成控制,类似肖像的 opt-in 模式,并特别提到用户与日本内容的深度连接;二是因用户生成量超出预期,将尝试对视频生成收费,并与希望角色被生成的版权方分享部分收入。具体模式仍在试错,目标是先在 Sora 迭代,再在 OpenAI 各产品中统一应用。

9月28日周日
9月23日周二
8月3日周日
7月18日周五
3月24日周一
9月2日周一
8月21日周三
4月12日周五
  1. Lilian Weng:Lil'Log(RSS)52

    Lilian Weng 长文综述扩散模型在视频生成中的应用

    Lilian Weng 在 Lil'Log 发布长文,系统梳理扩散模型用于视频生成的方法。文章先讲从零训练的参数化、采样与 3D U-Net、DiT 架构(如 VDM、Imagen Video、Sora),再讲如何改造预训练图像模型生成视频(Make-A-Video、Video LDM、SVD、Lumiere),最后介绍 Text2Video-Zero、ControlVideo 等免训练适配方法。

7月11日周日
  1. Lilian Weng:Lil'Log(RSS)75

    Lilian Weng 详解扩散模型:从 DDPM 原理到 DDIM、LDM、DiT 的演进

    Lilian Weng 在 Lil'Log 发表的长文系统讲解扩散模型:通过马尔可夫链逐步加噪再学习反向去噪来生成数据,涵盖 DDPM 的变分下界训练目标、与 NCSN 的联系、β 调度与方差参数化等核心内容。

    推荐理由:作者原创长文系统讲解扩散模型,从 DDPM 前反向过程到 DDIM、LDM、DiT 等演进,兼顾数学推导与方法脉络。

12月27日周四
12月31日周日
  1. Lilian Weng:Lil'Log(RSS)47

    R-CNN 家族目标检测模型详解:R-CNN、Fast R-CNN、Faster R-CNN 与 Mask R-CNN

    R-CNN 家族包含 R-CNN、Fast R-CNN、Faster R-CNN 和 Mask R-CNN 四个模型,前三个用于目标识别,Mask R-CNN 用于图像分割。R-CNN 先用 selective search 生成约 2k 个候选区域,再对每个区域独立提取 CNN 特征做分类,并用回归模型修正边界框。文章还介绍了非极大值抑制和难负样本挖掘等常用技巧。

12月15日周五