专栏名称: 爱可可-爱生活
知名互联网资讯博主 北邮PRIS模式识别实验室陈老师
今天看啥  ›  专栏  ›  爱可可-爱生活

【用不到2000美元在本地运行671B参数的全量Deepseek-20250202082627

爱可可-爱生活  · 微博  · AI  · 2025-02-02 08:26
    

文章预览

2025-02-02 08:26 本条微博链接 【用不到2000美元在本地运行671B参数的全量Deepseek-R1模型】 这套系统核心是一台AMD EPYC服务器,能达到3.5-4.25 tokens/秒的推理速度。关键配置如下: - CPU: AMD EPYC 7702(64核)或7V13/7C13 - 主板: MZ32-AR0(支持高达1TB内存) - 内存: 512GB DDR4 ECC - 存储: 1TB NVMe固态硬盘 - 散热: 420mm水冷 - 功耗: 空载60W,满载260W 部署步骤其实不算太复杂: 1. 安装Ubuntu 24.04服务器版 2. 配置Ollama环境 3. 部署OpenWebUI界面 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览