跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 用户
  • 群组
皮肤
  • 浅色
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • 深色
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(LCZ-Blue)
  • 不使用皮肤
  • LCZ-Green
  • LCZ-Blue
  • LCZ-Black
折叠
品牌标识

抡锤者

首页 版块 标签 硬件 AI 广场
  1. 主页
  2. 版块
  3. 随便聊聊
  4. reddit每日热帖欣赏 0828

reddit每日热帖欣赏 0828

已定时 已固定 已锁定 已移动 随便聊聊
6 帖子 4 发布者 180 浏览 1 关注中
  • 从旧到新
  • 从新到旧
  • 最多赞同
回复
  • 在新帖中回复
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • stxpnetS 离线
    stxpnetS 离线
    stxpnet
    超凡大师
    编写于 最后由 编辑
    #1

    2e68e138-c458-48e5-8354-07be171ab016-image.jpeg

    1e83e08f-7cd3-4ab0-9e87-ad2bcb17eb94-image.jpeg

    llama-server
      --host 127.0.0.1 --port ${PORT}
      --model ~/llm/models/Qwen3.8-27B-UD-Q5_K_XL.gguf
      --alias qwen38-27b
      --n-gpu-layers 99
      --parallel 1
      --flash-attn on
      --predict 16384
      --ctx-size 24576
      --cache-type-k q8_0
      --cache-type-v q8_0
      --spec-type draft-mtp
      --spec-draft-n-max 2
      --temp 0.6
      --top-p 0.95
      --top-k 20
      --min-p 0.0
      --presence-penalty 0.0
      --threads 8
      --batch-size 1024
      --ubatch-size 256
      --no-mmap
    

    26-08-19
    双卡3090(8x8x无nvlink,p2p驱动) +Sglang+qwen 3.8 27B awq模型 [功耗异常弃用]
    8-20 用vllm 0.26+ Qwen3.8-27B-SmoothQuant-W8A8-INT8 200K上下文 ~50t/s

    1 条回复 最后回复
    1
    • terryT 离线
      terryT 离线
      terry
      超级版主
      编写于 最后由 编辑
      #2

      坑比,我弟你这个帖子的意义是什么?

      油管:https://www.youtube.com/@抡锤者

      stxpnetS 1 条回复 最后回复
      0
      • imbiplaza ASUSI 离线
        imbiplaza ASUSI 离线
        imbiplaza ASUS
        至尊王者
        编写于 最后由 编辑
        #3

        让我做素材,赞赞赞

        generated_preview_1.mp4

        23223138-62d8-445d-8b11-aafbe4245b66-image.jpeg

        https://lcz.me/project/dcs

        1 条回复 最后回复
        1
        • terryT terry

          坑比,我弟你这个帖子的意义是什么?

          stxpnetS 离线
          stxpnetS 离线
          stxpnet
          超凡大师
          编写于 最后由 编辑
          #4

          @terry 随便聊聊

          26-08-19
          双卡3090(8x8x无nvlink,p2p驱动) +Sglang+qwen 3.8 27B awq模型 [功耗异常弃用]
          8-20 用vllm 0.26+ Qwen3.8-27B-SmoothQuant-W8A8-INT8 200K上下文 ~50t/s

          1 条回复 最后回复
          0
          • stxpnetS 离线
            stxpnetS 离线
            stxpnet
            超凡大师
            编写于 最后由 编辑
            #5

            03cfc3ad-b628-4e0b-afac-feb9d93ef603-image.jpeg

            8577da8a-e864-4198-bc43-3f3e77efc865-image.jpeg

            26-08-19
            双卡3090(8x8x无nvlink,p2p驱动) +Sglang+qwen 3.8 27B awq模型 [功耗异常弃用]
            8-20 用vllm 0.26+ Qwen3.8-27B-SmoothQuant-W8A8-INT8 200K上下文 ~50t/s

            kos orK 1 条回复 最后回复
            0
            • stxpnetS stxpnet

              03cfc3ad-b628-4e0b-afac-feb9d93ef603-image.jpeg

              8577da8a-e864-4198-bc43-3f3e77efc865-image.jpeg

              kos orK 离线
              kos orK 离线
              kos or
              超凡大师
              编写于 最后由 编辑
              #6

              @stxpnet

              Redditors 他們這討論不錯 也不知道怎樣的配置 2~3年而言 CP值最高
              但單卡而言 7900 XTX 24GB 或許不錯 不用辛苦地去湊雙卡了

              1 条回复 最后回复
              0

              你好!看起来您对这段对话很感兴趣,但您还没有一个账号。

              厌倦了每次访问都刷到同样的帖子?您注册账号后,您每次返回时都能精准定位到您上次浏览的位置,并可选择接收新回复通知(通过邮件或推送通知)。您还能收藏书签、为帖子顶,向社区成员表达您的欣赏。

              有了你的建议,这篇帖子会更精彩哦 💗

              注册 登录
              回复
              • 在新帖中回复
              登录后回复
              • 从旧到新
              • 从新到旧
              • 最多赞同


              • 登录

              • 登录或注册以进行搜索。
              • 第一个帖子
                最后一个帖子
              0
              • 版块
              • 最新
              • 标签
              • 热门
              • 用户
              • 群组