用3090如果只跑llm, 平均一个月用多少kwh 的电?好像比订阅的费用还要贵
-
@mankit-fu 我还真没考虑过大陆地区之外电费那么贵,大陆电费就几毛钱一度,夜间很便宜。但是如果干活,电费确实不值一提,香港地区你买什么3080?在香港要饭一个月也有一万港币吧,你买3080 3090和洋垃圾干嘛?R9700 RTXPro4500买起来,xtx也够用了。50w不可能。买新的CPU能接近,香港房子普遍狭小,你不要省钱了,弄新平台就是了。
-
@mankit-fu 软路由里装个 Hermes 管理你的AI服务器。远程开机。AI服务器做个线程限制。没工作流休眠然后关机(不要直接关机,一定要休眠后关机)。这样你的功耗就降下来了。软路由 对CPU没什么要求。内存最好1G 存储8G够用了。能做很多项目。不建议docker 方案。我做过。很闹心。需要的项目都直接安装。稳定性nice。
@williamlouis 我先等硬件都到了之后再慢慢研究
你这个方案好像挺不错
但激活模型的时间会不会比较长? -
@terry 我最后买了 7900xtx 淘宝5560元
组一台新的服务器用来跑qwen 3.6 27b
cpu 13400ef
32gb ddr4
我能直接把hermes 或openclaw 装在里面吗@mankit-fu 刚好跟我走了不同的方向
不建议吧hermers 装在一个地方 不然hermers 失控 你的llm也完蛋不然就llm装在proxmox lxc 然后另开vm装hermers
我应该直接装在ubuntu 懒得折腾想问为什么不选3090 吗
-
@williamlouis 我先等硬件都到了之后再慢慢研究
你这个方案好像挺不错
但激活模型的时间会不会比较长?@mankit-fu 又不是 intel 显卡。 关机后 再开机到底多久你是机主。你现场看看。不就知道多久了。 远程启动的时候你再看看表。OK?
-
@terry 我最后买了 7900xtx 淘宝5560元
组一台新的服务器用来跑qwen 3.6 27b
cpu 13400ef
32gb ddr4
我能直接把hermes 或openclaw 装在里面吗@mankit-fu 你把龙虾和hermes放在虚拟机里,不要给它宿主机权限。除非你这宿主机也无所谓被搞死。
-
虽然大哥影片有说过不要太纠结电费
但因为我是住香港的,电费比较贵
我现在手上只有一台3080 10G的电脑
cpu 是12700k
因为有一段时间需要长期电脑不关机
我有用opencode 帮忙做了一个软件去监控
发现平均下来待机一天就2.5kwh 左右,待机功耗也能到100w以上
cpu 30-40w, cpu 40w左右
也就是说一个月大概75kwh, 香港家用电费大概是一度电1.7元, 那待机就一个月127块所以自己订阅了opencode go用来用openclaw
就10美元一个月, 但我在算一笔帐待机电费都比我订阅还贵
得现在很纠结的是, 如果我买一张3090 24G
真的让它跑llm 的话我想电费可能要到250块以上
这价钱都够我订阅好几个模型...
有没有好的方法能压一下功耗
我也明白token 自由很重要
但那个电费是有点不划算
7900xtx 有比较省电吗
如果建一台新的话用老的ryzen 处理器要到那个性能级别比较好
有什么好的搭配能把待机压到50w左右@mankit-fu 就算你用訂閱 你還是要開機 一樣需要用電 3090滿載300w 加上其他預計150w
總共0.45w 你不可能24小時滿載 -
纠结电费的。可以不用:华南 x99 +e 2685 +3090
- 实测显卡没有加载任何东西的时候,50w 左右
2.显卡一旦跑过模型,然后没有任何负载,也有 20w 功耗
实测待机 70w
然后华南的主板没有 s3.也就是没有内存待机功能,只能休眠,休眠需要把内存写入 ssd。内存越大越慢开机也慢。而且服务器这么休眠重启后稳定性大为下降。所以根本不可能休眠
我的方案是,淘宝,拼多多,买一个 pci 的开机卡,然后把文档发给 herems。做一个开机就好了。
我的 hermes 默认用 deepseek。模型可以随时切换到本地,用完切换回 deepseek 就好了,顺便让 herems 把服务器关闭。
一切都可以在 hermes 的管理下,不需要人去动。这么用还解决一个服务器噪音问题。
- 实测显卡没有加载任何东西的时候,50w 左右
-
纠结电费的。可以不用:华南 x99 +e 2685 +3090
- 实测显卡没有加载任何东西的时候,50w 左右
2.显卡一旦跑过模型,然后没有任何负载,也有 20w 功耗
实测待机 70w
然后华南的主板没有 s3.也就是没有内存待机功能,只能休眠,休眠需要把内存写入 ssd。内存越大越慢开机也慢。而且服务器这么休眠重启后稳定性大为下降。所以根本不可能休眠
我的方案是,淘宝,拼多多,买一个 pci 的开机卡,然后把文档发给 herems。做一个开机就好了。
我的 hermes 默认用 deepseek。模型可以随时切换到本地,用完切换回 deepseek 就好了,顺便让 herems 把服务器关闭。
一切都可以在 hermes 的管理下,不需要人去动。这么用还解决一个服务器噪音问题。
@wwcd 我买了带有IPMI 接口的主板 晚上睡前关机 早上开机自动加载LLM
- 实测显卡没有加载任何东西的时候,50w 左右