用3090如果只跑llm, 平均一个月用多少kwh 的电?好像比订阅的费用还要贵
-
我觉得本地化部署就两个场景适合:
- 你有私密的数据。local agents场景,Openclaw或者Hermes真要能帮你干活,你得给他很多私密的数据,服务器的用户名密码,邮箱密码什么的。
- 你的需求没有现成的外部算力平台,比如老特的那种定制化的数字人生产流水线。
其他你要是写代码,爬资料之类的公共信息相关需求,直接买coding plan肯定更划算。
@davidwei0826 其实还有一个场景也比较多。就是断互联网情况下。
-
虽然大哥影片有说过不要太纠结电费
但因为我是住香港的,电费比较贵
我现在手上只有一台3080 10G的电脑
cpu 是12700k
因为有一段时间需要长期电脑不关机
我有用opencode 帮忙做了一个软件去监控
发现平均下来待机一天就2.5kwh 左右,待机功耗也能到100w以上
cpu 30-40w, cpu 40w左右
也就是说一个月大概75kwh, 香港家用电费大概是一度电1.7元, 那待机就一个月127块所以自己订阅了opencode go用来用openclaw
就10美元一个月, 但我在算一笔帐待机电费都比我订阅还贵
得现在很纠结的是, 如果我买一张3090 24G
真的让它跑llm 的话我想电费可能要到250块以上
这价钱都够我订阅好几个模型...
有没有好的方法能压一下功耗
我也明白token 自由很重要
但那个电费是有点不划算
7900xtx 有比较省电吗
如果建一台新的话用老的ryzen 处理器要到那个性能级别比较好
有什么好的搭配能把待机压到50w左右@mankit-fu 我还真没考虑过大陆地区之外电费那么贵,大陆电费就几毛钱一度,夜间很便宜。但是如果干活,电费确实不值一提,香港地区你买什么3080?在香港要饭一个月也有一万港币吧,你买3080 3090和洋垃圾干嘛?R9700 RTXPro4500买起来,xtx也够用了。50w不可能。买新的CPU能接近,香港房子普遍狭小,你不要省钱了,弄新平台就是了。
-
@mankit-fu 我还真没考虑过大陆地区之外电费那么贵,大陆电费就几毛钱一度,夜间很便宜。但是如果干活,电费确实不值一提,香港地区你买什么3080?在香港要饭一个月也有一万港币吧,你买3080 3090和洋垃圾干嘛?R9700 RTXPro4500买起来,xtx也够用了。50w不可能。买新的CPU能接近,香港房子普遍狭小,你不要省钱了,弄新平台就是了。
@terry 求解释 新平台ddr5比较好吗?
-
@terry 求解释 新平台ddr5比较好吗?
据ai 了解
用新平台的钱够付很多年的电费了 5年都回不了本 -
虽然大哥影片有说过不要太纠结电费
但因为我是住香港的,电费比较贵
我现在手上只有一台3080 10G的电脑
cpu 是12700k
因为有一段时间需要长期电脑不关机
我有用opencode 帮忙做了一个软件去监控
发现平均下来待机一天就2.5kwh 左右,待机功耗也能到100w以上
cpu 30-40w, cpu 40w左右
也就是说一个月大概75kwh, 香港家用电费大概是一度电1.7元, 那待机就一个月127块所以自己订阅了opencode go用来用openclaw
就10美元一个月, 但我在算一笔帐待机电费都比我订阅还贵
得现在很纠结的是, 如果我买一张3090 24G
真的让它跑llm 的话我想电费可能要到250块以上
这价钱都够我订阅好几个模型...
有没有好的方法能压一下功耗
我也明白token 自由很重要
但那个电费是有点不划算
7900xtx 有比较省电吗
如果建一台新的话用老的ryzen 处理器要到那个性能级别比较好
有什么好的搭配能把待机压到50w左右@mankit-fu 软路由里装个 Hermes 管理你的AI服务器。远程开机。AI服务器做个线程限制。没工作流休眠然后关机(不要直接关机,一定要休眠后关机)。这样你的功耗就降下来了。软路由 对CPU没什么要求。内存最好1G 存储8G够用了。能做很多项目。不建议docker 方案。我做过。很闹心。需要的项目都直接安装。稳定性nice。
-
@davidwei0826 其实还有一个场景也比较多。就是断互联网情况下。
-
@mankit-fu 我还真没考虑过大陆地区之外电费那么贵,大陆电费就几毛钱一度,夜间很便宜。但是如果干活,电费确实不值一提,香港地区你买什么3080?在香港要饭一个月也有一万港币吧,你买3080 3090和洋垃圾干嘛?R9700 RTXPro4500买起来,xtx也够用了。50w不可能。买新的CPU能接近,香港房子普遍狭小,你不要省钱了,弄新平台就是了。
-
@mankit-fu 软路由里装个 Hermes 管理你的AI服务器。远程开机。AI服务器做个线程限制。没工作流休眠然后关机(不要直接关机,一定要休眠后关机)。这样你的功耗就降下来了。软路由 对CPU没什么要求。内存最好1G 存储8G够用了。能做很多项目。不建议docker 方案。我做过。很闹心。需要的项目都直接安装。稳定性nice。
@williamlouis 我先等硬件都到了之后再慢慢研究
你这个方案好像挺不错
但激活模型的时间会不会比较长? -
@terry 我最后买了 7900xtx 淘宝5560元
组一台新的服务器用来跑qwen 3.6 27b
cpu 13400ef
32gb ddr4
我能直接把hermes 或openclaw 装在里面吗@mankit-fu 刚好跟我走了不同的方向
不建议吧hermers 装在一个地方 不然hermers 失控 你的llm也完蛋不然就llm装在proxmox lxc 然后另开vm装hermers
我应该直接装在ubuntu 懒得折腾想问为什么不选3090 吗
-
@williamlouis 我先等硬件都到了之后再慢慢研究
你这个方案好像挺不错
但激活模型的时间会不会比较长?@mankit-fu 又不是 intel 显卡。 关机后 再开机到底多久你是机主。你现场看看。不就知道多久了。 远程启动的时候你再看看表。OK?
-
@terry 我最后买了 7900xtx 淘宝5560元
组一台新的服务器用来跑qwen 3.6 27b
cpu 13400ef
32gb ddr4
我能直接把hermes 或openclaw 装在里面吗@mankit-fu 你把龙虾和hermes放在虚拟机里,不要给它宿主机权限。除非你这宿主机也无所谓被搞死。