跳到正文
热点事件历史事件

SageMaker AI 上用 vLLM-Omni 部署生成模型

2 篇报道1 个报道来源2026-09-29更新

先了解这件事

报道摘要

AWS 发布教程,演示如何用 vLLM-Omni DLC 在 Amazon SageMaker AI 上部署 Qwen3-TTS,通过 SageMaker 双向流式连接实现文本流入、24 kHz PCM 音频分块流出,并用 Gradio 应用验证。

摘自 AWS Machine Learning Blog

报道时间线

沿着报道,了解事件的不同侧面。

9月29日
  1. AWS Machine Learning Blog
    用 vLLM-Omni 在 SageMaker AI 上构建实时语音应用(Part 1)

    AWS 发布教程,演示如何用 vLLM-Omni DLC 在 Amazon SageMaker AI 上部署 Qwen3-TTS,通过 SageMaker 双向流式连接实现文本流入、24 kHz PCM 音频分块流出,并用 Gradio 应用验证。

  2. AWS Machine Learning Blog
    在 SageMaker AI 上用 vLLM-Omni 生成图像与视频(第二部分)

    AWS 发布 vLLM-Omni 图像视频生成示例,在同一 vLLM-Omni DLC 上部署两个 SageMaker AI 端点:实时端点跑 FLUX.2-klein-4B 文生图,异步端点跑 Wan2.1-VACE-1.3B 图生视频。