AWS Trainium全面支持PyTorch生态
先了解这件事
2026年10月19日,Hugging Face发布TorchNeuron,为PyTorch提供AWS Trainium的新原生后端,使Transformers、Diffusers等库直接支持Trainium,文本生成模型支持率从Optimum Neuron的46%提升至89。同日,亚马逊宣布向所有PyTorch开发者开放其AWS Trainium AI芯片,开发者无需重写代码即可使用。10月20日,亚马逊推出开源工具TorchNeuron,允许PyTorch代码只需更改一次配置即可在Trainium芯片上运行,该工具针对约85%使用PyTorch构建的AI应用。Deepgram将Nova-3语音识别模型迁移至AWS Trainium2,在批处理任务中实现每美元处理音频量提升11-70%。10月22日,Hugging Face发布TorchNeuron系统性能剖析教程,AWS Trainium通过torchtitan支持三种方式训练Qwen3。10月23日,Hugging Face推出Trainium模型支持查询工具,可查看Hub上模型是否能在AWS Trainium上运行。
AI 根据报道生成 · 16 天前更新
事件进展
6 个进展
- 10月23日 08:00 · 1 篇报道Hugging Face发布Trainium模型支持查询工具Hugging Face Blog:Hugging Face 推出 Trainium 模型支持查询工具
- 10月22日 04:00 · 1 篇报道Qwen3在AWS Trainium上训练AWS Machine Learning Blog:AWS Trainium 上使用 torchtitan 训练 Qwen3
- 10月22日 00:04 · 1 篇报道TorchNeuron系统级性能分析教程Hugging Face Blog:Hugging Face 博客:TorchNeuron 系统性能剖析(第一部分)—— AWS Trainium 上的系统级剖析
- 10月20日 00:23 · 1 篇报道Deepgram优化语音AI推理效率AWS Machine Learning Blog:Deepgram 优化 AWS Trainium 语音 AI 推理效率
- 10月19日 21:05 · 3 篇报道AWS Trainium芯片向PyTorch开发者开放IT之家:亚马逊推出开源工具 TorchNeuron,支持自研 Trainium 芯片运行 PyTorch 代码
- 10月19日 08:00 · 1 篇报道TorchNeuron发布PyTorch原生后端Hugging Face Blog:Hugging Face发布TorchNeuron,简化在AWS Trainium上运行模型
报道时间线
沿着报道,了解事件的不同侧面。
- Hugging Face BlogHugging Face 推出 Trainium 模型支持查询工具
Hugging Face 发布 torch-neuronx 模型支持查询工具,可查看 Hub 上模型是否能在 AWS Trainium 上运行,并提供运行脚本。该工具支持文本生成和图文模型,测试结果基于公共数据集,用户可直接查询模型兼容性。
- AWS Machine Learning BlogAWS Trainium 上使用 torchtitan 训练 Qwen3
AWS Trainium 通过 torchtitan 支持三种方式训练 Qwen3,包括 Transformers v5 后端、torchtitan 原生实现及 NKI MoE 内核优化。实验在 trn2.48xlarge 实例上完成,支持预训练和微调,可加载 Hugging Face 检查点并导出 safetensors 格式。
- Hugging Face BlogHugging Face 博客:TorchNeuron 系统性能剖析(第一部分)—— AWS Trainium 上的系统级剖析
Hugging Face 博客详解如何使用 TorchNeuron 对 AWS Trainium 推理性能进行系统级剖析,涵盖 torch.profiler 配置、Neuron Explorer 工具及 RMSNorm 操作的三种实现对比分析。
- IT之家精选亚马逊推出开源工具 TorchNeuron,支持自研 Trainium 芯片运行 PyTorch 代码
亚马逊宣布推出开源工具 TorchNeuron,允许开发者编写的 PyTorch 代码只需更改一次配置即可在自研 Trainium 芯片上本地运行,无需重写代码。该工具将于 10 月 20 日在北美 PyTorch 大会上以开源许可形式发布,旨在为开发者提供除英伟达 CUDA 外的可行选择。
- TechCrunch · AIAmazon发布TorchNeuron开发工具挑战NVIDIA
Amazon Web Services发布TorchNeuron工具,允许AI开发者只需更改一行配置即可将PyTorch应用迁移到Trainium芯片上运行。该工具针对约85%使用PyTorch构建的AI应用,旨在打破NVIDIA CUDA软件的垄断优势,同时提供完整的云基础设施支持。
- AWS Machine Learning BlogDeepgram 优化 AWS Trainium 语音 AI 推理效率
Deepgram 将 Nova-3 语音识别模型迁移至 AWS Trainium2,在批处理任务中实现每美元处理音频量提升 11–70%。通过 PyTorch 重建、内核调优及 Rust 并行运行时,单 trn2.3xlarge 实例可运行 8 个模型副本,成本效率显著提升。
- Hugging Face Blog精选Hugging Face发布TorchNeuron,简化在AWS Trainium上运行模型
Hugging Face发布TorchNeuron,为PyTorch提供AWS Trainium的新原生后端。从2026年10月20日起,研究人员和开发者可通过pip install torch-neuronx安装使用。TorchNeuron使Transformers、Diffusers等库直接支持Trainium,文本生成模型支持率从Optimum Neuron的46%提升至89%。