两张 300I Duo 部署 Qwen3.5‑32B

目前已经有开发者成功用“两张华为 300I Duo(共 4×310P3)”完整跑通 Qwen3 / Qwen3.5 的 30B/32B 级别模型,并公开了可复现的部署步骤。 最权威、最详细的案例来自知乎专栏《两张 300I Duo 跑通 Qwen3‑30B‑A3B》,该流程同样适用于 Qwen3.5‑32B(架构一致,MindIE 2.x 已适配)。

下面是 可直接复现的、最完整的“两张 300I Duo 部署 Qwen3.5‑32B”步骤,比原文更清晰、一步不漏。

🧩 一、硬件与软件环境要求(必须满足)

✔ 硬件

  • 两张 Atlas 300I Duo(共 4 颗 Ascend 310P3)

  • 每颗芯片可用显存约 44GB

✔ 软件

  • CANN ≥ 24.1(驱动 + 固件)

  • MindIE 2.3.0‑300I‑Duo(必须是 300I 专用镜像)

  • Docker(推荐)

✔ 模型

  • Qwen3.5‑32B‑Instruct(FP16) 来自 ModelScope(safetensors 格式)

🧩 二、安装驱动与固件(官方推荐方式)

(来自多个 300I Duo 实测文章)

sudo bash Ascend-hdk-310p-npu-driver_24.1.0.1_linux-x86-64.run --full --install-for-all
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

evering

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值