分页: 1 / 1

#1 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 14:07
irisyuan
但是不一定要黄卡。7900xtx大概是性价比最高的

#2 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 14:20
majia
Battlemage

据说会出24GB版本

#3 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 14:28
(ヅ)
属实,显存装不下只能塞内存里面cpu算慢多了

#4 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 15:07
irisyuan
(ヅ) 写了: 2025年 1月 29日 14:28 属实,显存装不下只能塞内存里面cpu算慢多了
CPU那点算力,有显卡的零头吗

#5 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 15:09
(ヅ)
irisyuan 写了: 2025年 1月 29日 15:07 CPU那点算力,有显卡的零头吗


也不是不能用

#6 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 15:28
majia
irisyuan 写了: 2025年 1月 29日 15:07 CPU那点算力,有显卡的零头吗
我之前玩文生图只是用集显

#7 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 15:41
irisyuan
majia 写了: 2025年 1月 29日 15:28 我之前玩文生图只是用集显
现在这种带推理的模型估计集显跑不起来

#8 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 15:42
牛河梁
majia 写了: 2025年 1月 29日 15:28 我之前玩文生图只是用集显
只有老牛嘀咕啥图需要本地生成么?

#9 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 20:12
majia
牛河梁 写了: 2025年 1月 29日 15:42 只有老牛嘀咕啥图需要本地生成么?
网上限制太多

不是要交钱,就是这不能画那不能画

#10 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 23:55
magagop
irisyuan 写了: 2025年 1月 29日 15:07 CPU那点算力,有显卡的零头吗
高端CPU算力大約是高端GPU的2%到3%,平均到芯片面積。

#11 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 29日 23:58
magagop
(ヅ) 写了: 2025年 1月 29日 15:09

也不是不能用
DeepSeek R1 641B Q4模型,放進512GB內存裡,大約有2 - 5 tokens per second性能,跟自己打字速度差不多,勉強可用。

#12 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 02:14
DIYer
按摩店7900xtx 有24GB显存

#13 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 03:41
majia
据说不少人都拿3090 魔改 48GB

#14 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 10:47
irisyuan
majia 写了: 2025年 1月 30日 03:41 据说不少人都拿3090 魔改 48GB
是4090吧?国内淘宝上就能找到做的

#15 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 12:26
majia
irisyuan 写了: 2025年 1月 30日 10:47 是4090吧?国内淘宝上就能找到做的
3090 价格低 功耗低 性价比更高

据说搞AI的显存容量更重要些

#16 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 12:56
huangchong
majia 写了: 2025年 1月 30日 12:26 3090 价格低 功耗低 性价比更高

据说搞AI的显存容量更重要些
完全同意。
4090浮点更快 但是这是人类很难感受到的。3090 功耗低100瓦,这对机器的健康非常有好处,我已经在很多别人的机器上感受到了

#17 Re: 本地部署,好像显存容量更重要

发表于 : 2025年 1月 30日 13:14
irisyuan
huangchong 写了: 2025年 1月 30日 12:56 完全同意。
4090浮点更快 但是这是人类很难感受到的。3090 功耗低100瓦,这对机器的健康非常有好处,我已经在很多别人的机器上感受到了
30系的一大问题是来路不明。30系那会儿正是全民挖矿的顶峰阶段。3090这样的算力顶流10个里面有9个都在哥布林巢服过役。当然只要价钱合适这都不是个事儿