返回顶部
热门问答 更多热门问答
技术文章 更多技术文章

DeepSeek-R1 671B KTransformer部署服务器配置

[复制链接]
链载Ai 显示全部楼层 发表于 9 小时前 |阅读模式 打印 上一主题 下一主题
一、Inter平台
1,四代/五代处理器 + DDR5
说明:4代/5代金牌处理器 + DDR5内存,跑deepseek-r1 671b Q4可达13+tps,输出体验已经很丝滑了,土豪选择

2,三代处理器及以下 + DDR4
说明:3代处理器 + DDR4内存,跑deepseek-r1 671b Q2.51实测速度可稳定 7.5~8tps,e5处理器也可以跑出5~6tps还是比较意外
# 万元以下配置参考(Inter平台)
# E5平台万元以下配置参考(Inter平台)

二,AMD平台
1,EPYC 9xxx处理器 + DDR5
说明:AMD平台 9xxx处理器 + DDR5内存,跑deepseek-r1 671b Q4可达14~16tps,这速度体验相当可以了,土豪选择

2,EPYC 7xxx处理器 + DDR4
说明:EPYC 7xxx处理器 + DDR4,跑跑deepseek-r1 671b Q2/Q4 输出速度也可达 6~7tps,万元以下的满血体验
# 万元以下配置参考(EPYC平台)

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

链载AI是专业的生成式人工智能教程平台。提供Stable Diffusion、Midjourney AI绘画教程,Suno AI音乐生成指南,以及Runway、Pika等AI视频制作与动画生成实战案例。从提示词编写到参数调整,手把手助您从入门到精通。
  • 官方手机版

  • 微信公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2025-2025. | 链载Ai
  • 桂ICP备2024021734号 | 营业执照 | |广西笔趣文化传媒有限公司|| QQ