全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

内置大模型资源配置建议

最近更新时间:2026-04-29 10:47:27

本文给出了不同规格内置大模型的资源规格配置建议,用户在部署内置大模型时可参考以下规格建议进行实例资源配置。

不同模型推荐资源配置

模型分类

模型

CPU(核)

内存(Gi)

GPU(卡)

是否支持多机部署

是否支持单点部署

deepseek

DeepSeek-R1-Distill-Qwen-1.5B

6

24

1

DeepSeek-R1-Distill-Qwen-7B

8

24

1

DeepSeek-R1-Distill-Qwen-14B

24

96

1

DeepSeek-R1-Distill-Qwen-32B

32

160

2

DeepSeek-R1-Distill-Llama-8B

24

64

1

DeepSeek-R1-Distill-Llama-70B

48

192

4

DeepSeek-R1

72

512

8

DeepSeek-V3

72

512

8

DeepSeek-V3-0324

72

512

8

DeepSeek-V3.1

72

512

8

Baichuan

Baichuan-M2-32B

32

160

2

GLM

GLM-4-9B-0414

24

64

1

GLM-4-32B-0414

32

160

2

GLM-4-32B-Base-0414

32

160

2

GLM-Z1-9B-0414

24

64

1

GLM-Z1-32B-0414

32

160

2

GLM-Z1-Rumination-32B-0414

32

160

2

Kimi

Kimi-K2-Base

72

512

8

Kimi-K2-Instruct

72

512

8

Qwen

Qwen2.5-VL-7B-Instruct

16

48

1

Qwen2.5-VL-32B-Instruct

48

160

2

Qwen3-30B-A3B

32

160

2

Qwen3-32B

32

160

2

Qwen3-235B-A22B

48

256

4

MiMo

MiMo-7B-RL

24

64

1

MiMo-7B-RL-Zero

24

64

1

Cosmos

cosmos-Reason1-7B

8

24

1

文档导读
纯净模式常规模式

纯净模式

点击可全屏预览文档内容
文档反馈